Back to Question Center
0

URL અનુક્રમિત છે પરંતુ "આ સાઇટના robots.txt" ને કારણે વર્ણન ઉપલબ્ધ નથી. - મીમલ્ટ

1 answers:

મારી પાસે Google દ્વારા સૂચિબદ્ધ સમાન URL છે

https: // ઉદાહરણ. કોમ / કંપનીઓ / કંપની? utm_source = xxx

અને આ આઉટપુટ:

આ સાઇટના રોબોટ્સને લીધે આ પરિણામનું વર્ણન ઉપલબ્ધ નથી. txt - gonfiabili in offerta.

અહીં રોબોટ્સ છે. txt

     વપરાશકર્તા-એજન્ટ: *
નામંજૂર કરો: /
નામંજૂર કરો: / સ્થિર / *
નામંજૂર કરો: / નમૂનાઓ / *
નામંજૂર કરો: / અનુવાદ / *
સાઇટમેપ: https: // ઉદાહરણ. કોમ / સાઇટમેપ. xml    

મારી પાસે બે પ્રશ્નો છે. આ પ્રકારના યુઆરએલને સૂચિબદ્ધ કરવા અનુક્રમિત થાય છે? જો એમ હોય તો, હું કેવી રીતે વર્ણન વિશે તે સંદેશ દૂર કરી શકું?

February 13, 2018

આ રેખાને દૂર કરો

  નામંજૂર કરો: / 

અને તમે જવા માટે સારા છો.

  વપરાશકર્તા એજન્ટ: *
નામંજૂર કરો: / 

અહીં * નો અર્થ છે કે Googlebot, BingBot, YandexBot સહિત તમામ નમ્ર બૉટ તમારા રોબોટ્સનું પાલન કરશે. txt નિયમો, અને / અર્થ બધી ડિરેક્ટરીઓ ક્રોલ માટે પ્રતિબંધિત છે.

તમારે આ નિયમનો ઉપયોગ કરવો જોઈએ.

  વપરાશકર્તા એજન્ટ: *
નામંજૂર કરો: / સ્થિર / *
નામંજૂર કરો: / નમૂનાઓ / *
નામંજૂર કરો: / અનુવાદ / *
સાઇટમેપ: https: // ઉદાહરણ. કોમ / સાઇટમેપ. xml 

આ રોબોટ્સ. ટેક્સટ તમામ નમ્ર બોટને સ્થિર, ટેમ્પ્લેટ અને અનુવાદ ફોલ્ડરની અંદર બધી ફાઇલોને ક્રોલ કરતી નથી. તેથી ફરીથી જો તમારા સાઇટમેપમાં આ URL છે

  https: // ઉદાહરણ. કોમ / સ્થિર / કેટલાક-જાવાસ્ક્રિપ્ટ. જેએસ
https: // ઉદાહરણ. કોમ / સ્થિર / કેટલાક ફોટા. PNG
https: // ઉદાહરણ. કોમ / નમૂનાઓ / કેટલાક / ઇન્ડેક્સ. html
https: // ઉદાહરણ. કોમ / નમૂનાઓ / અનુવાદ / ડી / ઇન્ડેક્સ. html 

પછી Google શોધ પરિણામોમાં તે રેખા પ્રદર્શિત કરશે કારણ કે તમે તેને ક્રોલિંગ માટે અવરોધિત કર્યું છે, તેથી રોબોટ્સને સમજો. txt ખ્યાલ, તે સમજવું મુશ્કેલ નથી.