A Cloudflare webszolgáltató egy sor új mesterséges intelligencia-feltérképező eszközt dobott piacra, mint például az AI Audit és a Block AI Scrapers and Crawlers. Ezeket az eszközöket arra tervezték, hogy megkönnyítsék a webhelytulajdonosok, alkotók és kiadók számára annak eldöntését, hogy engedélyezik-e a mesterséges intelligenciarobotok számára a tartalom elérését. Ezzel kapcsolatban a Cloudflare azt mondta: „Amikor a mesterséges intelligenciarobotok hozzáférnek a webhely tartalmához, a Cloudflare összes felhasználója áttekintheti és szabályozhatja azt.
Az AI Audit képes nyomon követni az AI bejárók típusait és konkrét tevékenységeit. Pontosabban, az AI Audit a webhelylátogatások során gyűjtött naplókat veszi, és olyan felhasználói ügynököket keres, amelyek megfelelnek az ismert mesterséges intelligencia-robotoknak, valamint összesíti az egyes bejárók tevékenységét. Szűrőket is biztosít, így a webmesterek láthatják egy adott forrásból származó mesterséges intelligencia-feltérképező robotok tevékenységét. Az AI Audit segítségével a webmesterek megtekinthetik az AI feltérképező robotok különféle viselkedését, beleértve a látogatások gyakoriságát és az elért konkrét tartalmat. Emellett a webmesterek megtekinthetik a ?legnépszerűbb tartalmat? az AI Audit segítségével, hogy megtudja, hányszor térképezték fel a releváns tartalmat egy adott időszakban.
Cloudflare blogbejegyzésekijelentette, ?Úgy gondoljuk, tudnia kell, miért, mikor és milyen gyakran térképezték fel az AI-robotok webhelyét. Ezen adatok felhasználásával elkezdheti elemezni, hogy az AI-robotok hogyan férnek hozzá a webhelyéhez.?Ráadásul, Cloudflare rámutatott, hogy?sok mesterséges intelligencia vállalat több bejárót használ különböző feladatok elvégzésére. Ezek a különbségek fontosak. A különböző típusú feltérképező robotok által végzett vizsgálatok befolyásolhatják webhelye forgalmát vagy tartalom-hozzárendelését.?
Másrészt,Blokkolja a mesterséges intelligencia kaparókat és bejárókatAz eszközök lehetővé teszik a webhelykezelők számára, hogy egyetlen kattintással blokkolják az összes mesterséges intelligencia-robot. Ezzel az eszközzel kapcsolatban Cloudflare azt mondta: ?Ez az egykattintásos opció letiltja az ismert mesterséges intelligenciarobotokat, hogy hozzáférjenek webhelyéhez a Cloudflare által karbantartott lista alapján.?Ha a letiltás be van kapcsolva, Ön és csapata kényelmesebb döntéseket hozhat arról, hogy mihez kezdjen legközelebb tartalmaival.
Úgy tűnik, hogy ha a webhely adminisztrátora úgy dönt?ne engedjen mászni,? csak a Block AI Scrapers and Crawlers funkciót kell bekapcsolva tartani. Ha engedélyezni szeretné egyes mesterséges intelligenciarobotok szelektív feltérképezését, a Cloudflare a webhelyadminisztrátorokat is támogatja ebben.A rendszergazdák szabályokat is létrehozhatnakmint?Az összes mesterséges intelligencia bejáró letiltása, kivéve az adott platformról származókats.?Cloudflare ezt hangsúlyozta?Az új szűrők alkalmazása mellett azt javasoljuk, hogy ügyfeleink fontolják meg a szolgáltatási feltételek frissítését, hogy lefedjék ezt az új használati esetet.?
Érdemes megemlíteni, hogy a Cloudflare azt is bejelentette, hogy jövőre piacteret indít, amely lehetővé teszi az AI-cégek számára, hogy fizessenek a webhelyek tartalmához fűződő jogok lekoptatásáért. A Cloudflare szerint a weboldalak üzemeltetői behelyezhetik weboldalaikat erre a piacra, és ha egy mesterséges intelligencia fejlesztő hajlandó fizetni a tartalmáért, akkor a nagy mesterségesintelligencia-modellek betanításához olyan felületet tudnak biztosítani a weboldal tartalmának lekaparásához.