Back to Question Center
0

URL અનુક્રમિત છે પરંતુ "આ સાઇટના robots.txt" ને કારણે વર્ણન ઉપલબ્ધ નથી. - મીમલ્ટ

1 answers:

મારી પાસે Google દ્વારા સૂચિબદ્ધ સમાન URL છે

https: // ઉદાહરણ. કોમ / કંપનીઓ / કંપની? utm_source = xxx

અને આ આઉટપુટ:

આ સાઇટના રોબોટ્સને લીધે આ પરિણામનું વર્ણન ઉપલબ્ધ નથી. txt.

અહીં રોબોટ્સ છે. txt

  વપરાશકર્તા-એજન્ટ: *
નામંજૂર કરો: /
નામંજૂર કરો: / સ્થિર / *
નામંજૂર કરો: / નમૂનાઓ / *
નામંજૂર કરો: / અનુવાદ / *
સાઇટમેપ: https: // ઉદાહરણ. કોમ / સાઇટમેપ. xml 

મારી પાસે બે પ્રશ્નો છે. આ પ્રકારના યુઆરએલને સૂચિબદ્ધ કરવા અનુક્રમિત થાય છે? જો એમ હોય તો, હું કેવી રીતે વર્ણન વિશે તે સંદેશ દૂર કરી શકું?

6 days ago

આ રેખાને દૂર કરો

  નામંજૂર કરો: / 

અને તમે જવા માટે સારા છો.

  વપરાશકર્તા એજન્ટ: *
નામંજૂર કરો: / 

અહીં * નો અર્થ છે કે Googlebot, BingBot, YandexBot સહિત તમામ નમ્ર બૉટ તમારા રોબોટ્સનું પાલન કરશે. txt નિયમો, અને / અર્થ બધી ડિરેક્ટરીઓ ક્રોલ માટે પ્રતિબંધિત છે.

તમારે આ નિયમનો ઉપયોગ કરવો જોઈએ.

  વપરાશકર્તા એજન્ટ: *
નામંજૂર કરો: / સ્થિર / *
નામંજૂર કરો: / નમૂનાઓ / *
નામંજૂર કરો: / અનુવાદ / *
સાઇટમેપ: https: // ઉદાહરણ. કોમ / સાઇટમેપ. xml 

આ રોબોટ્સ. ટેક્સટ તમામ નમ્ર બોટને સ્થિર, ટેમ્પ્લેટ અને અનુવાદ ફોલ્ડરની અંદર બધી ફાઇલોને ક્રોલ કરતી નથી. તેથી ફરીથી જો તમારા સાઇટમેપમાં આ URL છે

  https: // ઉદાહરણ. કોમ / સ્થિર / કેટલાક-જાવાસ્ક્રિપ્ટ. જેએસ
https: // ઉદાહરણ. કોમ / સ્થિર / કેટલાક ફોટા. PNG
https: // ઉદાહરણ. કોમ / નમૂનાઓ / કેટલાક / ઇન્ડેક્સ. html
https: // ઉદાહરણ. કોમ / નમૂનાઓ / અનુવાદ / ડી / ઇન્ડેક્સ. html 

પછી Google શોધ પરિણામોમાં તે રેખા પ્રદર્શિત કરશે કારણ કે તમે તેને ક્રોલિંગ માટે અવરોધિત કર્યું છે, તેથી રોબોટ્સને સમજો. txt ખ્યાલ, તે સમજવું મુશ્કેલ નથી.

URL અનુક્રમિત છે પરંતુ "આ સાઇટના robots.txt" ને કારણે વર્ણન ઉપલબ્ધ નથી. - મીમલ્ટ
Reply