Back to Question Center
0

Robots.txt માં, શા માટે સેમોડલ નિયમ નીચે "મંજૂરી આપો: / *" હશે?

1 answers:

હું તમામ Google (સંપૂર્ણ) પર પૂર્ણ એક્સેસ આપવા માંગુ છું

હું ખાસ વિશે ભેળસેળ છું મંજૂરી આપો: / * નીચે નામંજૂર:

     # Google છબી
વપરાશકર્તા એજન્ટ: Googlebot-Image
નામંજૂર કરો:
મંજૂરી આપો: / *# Google AdSense
વપરાશકર્તા એજન્ટ: મધ્યસ્થતા-Google
નામંજૂર કરો:    

. Source - hr management platform
February 13, 2018
. મૂળ રોબોટ્સ. txt પ્રમાણભૂત માત્ર સમાવેશ થાય છે નામંજૂર દિશાઓ. Google ના રોબોટ્સ કરવું સમજવું ડાયરેક્ટાઇટ્સને મંજૂરી આપો, તેથી તે Google રોબોટ પર લક્ષિત વિભાગોમાં તેનો ઉપયોગ કરવા માટે ઠીક રહેશે. આ નામંજૂર . તેનો ઉપયોગ સમગ્ર વિભાગના ફાઇનર ગ્રેઇન્ડ ભથ્થું (કદાચ ફક્ત એક જ પૃષ્ઠ) આપવા માટે થઈ શકે છે જે અન્યથા નામંજૂર કરવામાં આવશે જો આ કિસ્સો હોય, તો તમને મુખ્ય Googlebot માટે પણ નિયમની જરૂર પડશે. હું તમારી રોબોટ્સમાં આનો ઉપયોગ કરવાનું સૂચન કરું છું. txt

  # Google છબી
વપરાશકર્તા એજન્ટ: Googlebot-Image
નામંજૂર કરો:# Google AdSense
વપરાશકર્તા એજન્ટ: મધ્યસ્થતા-Google
નામંજૂર કરો:# Googlebot
વપરાશકર્તા એજન્ટ: Googlebot
નામંજૂર કરો: