როგორ განვაახლოთ განახლებული ან ახალი Robots.txt ფაილი

რობოტები txt

ჩვენი სააგენტო ამუშავებს ორგანული საძიებო კონსულტაცია ინდუსტრიაში SaaS– ის რამდენიმე გამყიდველისთვის. კლიენტმა, რომელთანაც ჩვენ ახლახან დავიწყეთ მუშაობა, საკმაოდ სტანდარტული პრაქტიკა გაუკეთებია, მათი განაცხადის განთავსება ქვედომენზე და მათი ბროშურის საიტის ძირითადი დომენზე გადატანა. ეს სტანდარტული პრაქტიკაა, რადგან ის საშუალებას აძლევს თქვენს მწარმოებელ გუნდს და მარკეტინგის ჯგუფს, განახორციელონ საჭიროების მიხედვით, სხვაზე დამოკიდებულების გარეშე.

როგორც მათი ორგანული ძიების ჯანმრთელობის ანალიზის პირველი ეტაპი, ვებ – საიტებში დავარეგისტრირეთ როგორც ბროშურა, ასევე აპლიკაციების დომენები. სწორედ მაშინ დავადგინეთ უშუალო საკითხი. განაცხადის ყველა გვერდი იბლოკებოდა საძიებო სისტემების ინდექსირებაში. ჩვენ გადავედით ვებ – მასტერებში მათ robots.txt– ის შესვლაზე და დაუყოვნებლივ დავადგინეთ ეს საკითხი.

მიგრაციისთვის ემზადებოდნენ, მათ შემუშავების ჯგუფს არ სურდა, რომ აპლიკაციის ქვედომენი ინდექსირებულიყო ძიებით, ამიტომ მათ საძიებო სისტემებზე წვდომა არ მისცეს. Robots.txt ფაილი არის ფაილი, რომელიც ნაპოვნია თქვენი საიტის ფესვში - yourdomain.com/robots.txt - ეს საშუალებას აძლევს საძიებო სისტემას გააცნობიეროს, სჭირდებათ თუ არა მათ საიტი. თქვენ შეგიძლიათ დაწეროთ წესები ინდექსაციის დაშვების ან აკრძალვისთვის მთელ საიტზე ან კონკრეტულ ბილიკებზე. ასევე შეგიძლიათ დაამატოთ ხაზი თქვენი საიტის რუქის ფაილის დასაზუსტებლად.

ის robots.txt ფაილს ჰქონდა შემდეგი ჩანაწერი, რამაც ხელი შეუშალა საიტის გადახედვას და ინდექსაციას ძიების შედეგების რანჟირებაში:

მომხმარებლის აგენტი: * აკრძალვა: /

ეს უნდა დაწერილიყო შემდეგნაირად:

მომხმარებლის აგენტი: * დაშვება: /

ეს უკანასკნელი უზრუნველყოფს საიტის მცოცავი ნებისმიერი საძიებო სისტემის ნებართვას, რომ მათ ჰქონდეთ წვდომა ვებგვერდზე განთავსებულ ნებისმიერ კატალოგზე.

დიდი… ახლა, რომ robots.txt ფაილი შესანიშნავია, მაგრამ საიდან იცის Google- მა და როდის შეამოწმებენ ისინი კვლავ საიტზე? თქვენ შეგიძლიათ აბსოლუტურად მოითხოვოთ Google- მა შეამოწმოს თქვენი robots.txt, მაგრამ ეს არ არის ძალიან ინტუიციური.

ნავიგაცია Google Search Console საძიებო კონსოლი რომ Crawl> robots.txt ტესტერი. ტესტერში ნახავთ ბოლოს ბოლოდროინდელ რობოტებში. Txt ფაილის შინაარსს. თუ გსურთ თქვენი robots.txt ფაილის ხელახლა გაგზავნა, დააჭირეთ ღილაკს გაგზავნა და გამომავალი ფანჯარა გამოვა რამდენიმე ვარიანტი.

ხელახლა გაგზავნა robots.txt

საბოლოო ვარიანტია სთხოვეთ Google- ს განახლება. დააწკაპუნეთ ლურჯი გაგზავნის ღილაკზე ამ ვარიანტის გვერდით და შემდეგ გადადით უკან Crawl> robots.txt ტესტერი მენიუს ვარიანტი გვერდის გადასატვირთად. ახლა უნდა ნახოთ განახლებული robots.txt ფაილი თარიღის შტამპთან ერთად, რომელიც აჩვენებს, რომ ის კვლავ გადაიტანეს.

თუ ვერ ხედავთ განახლებულ ვერსიას, შეგიძლიათ დააჭიროთ გაგზავნას და აირჩიოთ იხილეთ ატვირთული ვერსია თქვენს რეალური robots.txt ფაილზე გადასასვლელად. მრავალი სისტემა შეაჩერებს ამ ფაილს. ფაქტობრივად, IIS ქმნის ამ ფაილს დინამიურად, მათი მომხმარებლის ინტერფეისით შეყვანილი წესების საფუძველზე. თქვენ, სავარაუდოდ, მოგიწევთ წესების განახლება და ქეშის განახლება, რათა გამოაქვეყნოთ ახალი robots.txt ფაილი.

რობოტები- txt- ტესტერი

რას ფიქრობთ?

ეს საიტი იყენებს Akismet- ს, რათა შეამციროს სპამი. შეისწავლეთ თქვენი კომენტარის მონაცემები დამუშავებული.