15 қыркүйектен бастап желілік инфрақұрылым провайдері Cloudflare веб-ресурстарды қорғауды жаңа деңгейге көтереді: әдепкі бойынша жасанды интеллект негізіндегі барлық «аралас» краулерлерді бұғаттау іске қосылады. Бұл шешім — баспагерлердің серверлеріне түсетін жүктеменің өсуіне және генеративті ЖИ дәуірінде зияткерлік меншік мәселелерінің шиеленісуіне тікелей жауап.
Мәселе іздеу индекстеу, модельдерді оқыту және ЖИ-агенттердің жұмысын бір бөтелкеде біріктіретін боттар туралы болып отыр. Cloudflare бұл міндеттерді нақты бөлуді талап етеді. Баспагерлер іздеу нәтижелерінде және ЖИ-қызметтерінде көрінуді сақтағысы келеді, бірақ өз контентін бәсекелес модельдерді оқытуға немесе бастапқы дереккөздерді айналып өтетін жауаптарды генерациялауға тегін беруге мүлдем дайын емес.
Компанияда атап өткендей, интернет «нөлдік басу» экожүйесіне қарай жылжуда, мұнда чат-боттар лездік жауаптар үшін түпнұсқа контентті жұтып, авторларды толығымен елемейді. Біз SEO-дан AEO-ға (жауаптарды оңтайландыру) дейінгі жолды өттік, енді GEO (генеративті ЖИ-ді оңтайландыру) табалдырығында тұрмыз. Бұл бұғаттау — сайт иелеріне бақылауды қайтару әрекеті.
Cloudflare-ді қатаңдатуға итермелеген негізгі фактор — статистика. ЖИ-краулерлер трафигінің 50%-дан астамы бір беттерді қайта сканерлеуге келеді, бұл ешқандай пайда да, жаңа деректер де әкелмейді. Бұл ешқандай қайтарымсыз инфрақұрылымға таза жүктеме.
Жаңа ережелер тегін тарифтің барлық клиенттеріне, жаңа пайдаланушыларға және қолданыстағы сайттарға қатысты болады. Алайда хостинг иелері, егер «аралас» боттар өздеріне пайда әкеледі деп есептесе, бұл опцияны қолмен өшіре алады.
Сонымен қатар Cloudflare баспагерлер үшін Pay Per Use коммерциялық моделін дамытады. Енді төлем материалға қол жеткізу үшін ғана емес, сонымен қатар контент ЖИ-қызметі үшін құнды деп танылған жағдайда да алынады. Бастапқыда Ceramic.ai және You.com серіктес болды. Баспагерлер олардың материалдары чат-боттардың нәтижелерінде пайда болса, төлем алады.
Сарапшының пікірі: Бұл контент егемендігі үшін күрестегі логикалық қадам. Алайда мәселе мынада: OpenAI және Google сияқты ірі ойыншылар мұндай шектеулер енгізілгенге дейін үлкен көлемдегі деректерді жинап үлгерген. «Аралас» краулерлерді бұғаттау — бұл өткен қателіктерді түзетуден гөрі болашақ контентті қорғау. Нарық ЖИ-ге әрбір сұраныс монетизацияланатын модельге қарай жылжуда, ал Cloudflare осы жаңа экономикада бас арбитр орнын бекітуге тырысады.