Ինչպես նորից ներկայացնել թարմացված կամ նոր Robots.txt ֆայլը

ռոբոտներ txt

Մեր գործակալությունը կարգավորում է օրգանական որոնման խորհրդատվություն արդյունաբերության մի քանի SaaS վաճառողների համար: Մի հաճախորդ, որի հետ մենք վերջերս սկսեցինք աշխատել, կատարել է բավականին ստանդարտ պրակտիկա ՝ իրենց դիմումը տեղադրելով ենթադոմեյնում և իր բրոշյուրի կայքը տեղափոխելով հիմնական տիրույթ: Սա սովորական պրակտիկա է, քանի որ այն հնարավորություն է տալիս ինչպես ձեր արտադրական թիմին, այնպես էլ ձեր շուկայավարման թիմին անհրաժեշտության դեպքում կատարել թարմացումներ ՝ առանց մյուսից կախվածության:

Որպես նրանց օրգանական որոնման առողջությունը վերլուծելու առաջին քայլ, մենք գրանցեցինք ինչպես բրոշյուրը, այնպես էլ կիրառման տիրույթները Վեբմաստերներում: Հենց այդ ժամանակ մենք պարզեցինք մի անհապաղ խնդիր: Դիմումի բոլոր էջերը արգելափակվում էին ինդեքսավորվել որոնիչների կողմից: Մենք նավարկեցինք դեպի նրանց robots.txt մուտքը Վեբ վարպետներ և անմիջապես հայտնաբերեցինք խնդիրը:

Միգրացիային նախապատրաստվելիս նրանց զարգացման թիմը չէր ցանկանում, որ հավելվածի ենթադոմեյնը ինդեքսավորվի որոնման միջոցով, ուստի նրանք արգելեցին մուտքը որոնիչ: Robots.txt ֆայլը ձեր կայքի արմատում հայտնաբերված ֆայլ է. yourdomain.com/robots.txt - դա թույլ է տալիս որոնիչին իմանալ, արդյոք նրանք պետք է սողան կայքում: Դուք կարող եք գրել կանոններ ՝ թույլ տալու կամ թույլ չտալ ինդեքսավորումը ամբողջ կայքում կամ հատուկ ուղիներում: Կարող եք նաև ավելացնել տող ՝ ձեր կայքի քարտեզի ֆայլը նշելու համար:

The Robots.txt ֆայլը ուներ հետևյալ գրառումը, որը թույլ չտվեց կայքի որոնումը և ինդեքսավորումը որոնման արդյունքների դասակարգման մեջ.

Օգտագործող գործակալ. * Չեղարկել. /

Այն պետք է գրվեր հետեւյալ կերպ.

Օգտագործող գործակալ. * Թույլատրել ՝ /

Վերջինս թույլ է տալիս կայք սողացող ցանկացած որոնիչին թույլ տալ, որ նրանք կարողանան մուտք գործել կայքի ցանկացած գրացուցակ կամ ֆայլ:

Great Great այնպես որ հիմա, որ robots.txt ֆայլը կատարյալ է, բայց ինչպե՞ս Google- ը գիտի, և ե՞րբ են նրանք նորից ստուգելու կայքը: Դե, կարող եք բացարձակապես պահանջել, որ Google- ը ստուգի ձեր robots.txt- ը, բայց դա այնքան էլ ինտուիտիվ չէ:

Նավարկել դեպի Google Որոնման Վահանակ Որոնման Վահանակ դեպի Սողալ> robots.txt ստուգիչ, Քննիչի շրջանակներում կտեսնեք վերջերս սողացող robots.txt ֆայլի պարունակությունը: Եթե ​​ցանկանում եք կրկին ուղարկել ձեր robots.txt ֆայլը, կտտացրեք «Ուղարկել» -ին և պատուհանը կգա մի քանի տարբերակ:

նորից ներկայացնել robots.txt- ը

Վերջնական տարբերակն է Google- ին խնդրեք թարմացնել, Կտտացրեք այդ տարբերակին կից ներկայացրեք կապույտ կոճակին և այնուհետև վերադարձեք դեպի Սողալ> robots.txt ստուգիչ էջը վերաբեռնելու համար ընտրացանկի ընտրանք: Այժմ դուք պետք է տեսնեք նորացված robots.txt ֆայլը `ամսաթվի դրոշմակնիքով, որը ցույց է տալիս, որ այն նորից սողացել է:

Եթե ​​դուք չեք տեսնում նորացված տարբերակ, կարող եք սեղմել ուղարկել և ընտրել Դիտեք վերբեռնված տարբերակը նավարկելու համար ձեր իրական robots.txt ֆայլը: Բազմաթիվ համակարգեր պահելու են այս ֆայլը: Փաստորեն, IIS- ն այս ֆայլը դինամիկորեն առաջացնում է `հիմնվելով իրենց օգտվողի միջերեսի միջոցով մուտքագրված կանոնների վրա: Robots.txt նոր ֆայլ հրապարակելու համար, ամենայն հավանականությամբ, ստիպված կլինեք թարմացնել կանոնները և թարմացնել պահոցը:

ռոբոտներ- txt- փորձարկիչ

Այս կայքը օգտագործում է Akismet- ը սպամի նվազեցման համար: Իմացեք, թե ինչպես է ձեր տվյալները մշակվում.