Cloudflare-ի AI բոտերի կառավարումը կարող է ազդել Googlebot-ի վրա. ի՞նչ պետք է ստուգեն կայքի սեփականատերերը

Cloudflare-ը թարմացրել է իր AI երթևեկության կառավարման համակարգը՝ ներդնելով որոնման (Search), ուսուցման (Training) և գործակալների (Agent) հասանելիության առանձին կարգավորումներ: Կայքի սեփականատերերի համար կարևոր է իմանալ, որ «Training»-ի արգելափակումը կարող է աննկատ կերպով սահմանափակել Googlebot-ի, Applebot-ի և BingBot-ի աշխատանքը գովազդային էջերում: Քանի որ այս սողունները (crawlers) կատարում են և՛ որոնման ինդեքսավորում, և՛ AI-ի հետ կապված առաջադրանքներ, լայնածավալ արգելափակումները կարող են վնասել կայքի օրգանական տեսանելիությանը: Cloudflare-ն այժմ խոշոր որոնողական համակարգերը դասակարգում է որպես «հաշվետու» սողուններ՝ խորհուրդ տալով օգտագործել «Disallow AI Training» կարգավորումը՝ մոդելների ուսուցումը սահմանափակելու և որոնման ինդեքսավորումը պահպանելու համար: Ընկերությունը նաև ներկայացրել է «Bot Preference Sync» գործիքը՝ robots.txt ֆայլերը կարգավորումների հետ համաժամեցնելու համար: Թիմերին խորհուրդ է տրվում վերանայել իրենց ընթացիկ կարգավորումները և հետևել որոնման տվյալներին՝ համոզվելու համար, որ AI-ի արգելափակումը չի խոչընդոտում որոնողական համակարգերի աշխատանքին: