Cloudflare ujawnia ukryte przeszukiwanie zablokowanych witryn przez Perplexity, co wywołuje negatywną reakcję i budzi obawy dotyczące etyki sztucznej inteligencji, przejrzystości i scrapowania treści

Startup Perplexity, zajmujący się wyszukiwaniem opartym na sztucznej inteligencji, znalazł się w centrum kontrowersji w związku z oskarżeniami o obejście zabezpieczeń mających na celu uniemożliwienie robotom indeksującym dostęp do niektórych chronionych witryn. Niedawny raport Cloudflare donosi, że Perplexity stosował oszukańcze taktyki, ukrywając swoją tożsamość, aby ominąć ograniczenia mające na celu ochronę treści witryn. Oskarżenia sugerują, że firma omijała wytyczne zawarte w plikach robots.txt – wskazujące, które sekcje witryny powinny pozostać niedostępne dla botów – poprzez stosowanie zamaskowanych agentów użytkownika i zmianę dostawców usług, aby uniknąć wykrycia.

Kontrowersje wokół Perplexity pogłębiają się wraz z twierdzeniami o indeksowaniu chronionych witryn

Oskarżenia Cloudflare wynikają z szeroko zakrojonego dochodzenia przeprowadzonego przez firmę. W jego ramach stworzono ukrytą stronę internetową z ograniczeniami dla robotów indeksujących, która nie była ani linkowana, ani publicznie indeksowana. Służyła ona jako honeypot do testowania możliwości indeksowania przez Perplexity. Według Cloudflare, systemy Perplexity uzyskały dostęp do tej strony z ograniczeniami i uwzględniły jej zawartość w wynikach wyszukiwania, co budzi poważne obawy dotyczące praktyk firmy w zakresie gromadzenia danych.

Cloudflare twierdzi, że działania te nie tylko naruszają warunki korzystania z usługi, ale są również etycznie wątpliwe. W rezultacie Perplexity został usunięty z listy zweryfikowanych botów. Cloudflare ogłosiło plany zaostrzenia ograniczeń dotyczących robotów indeksujących opartych na sztucznej inteligencji (AI), sygnalizując proaktywne podejście mające na celu zapobieganie nieautoryzowanemu scrapowaniu danych. W przeciwieństwie do tego, Perplexity stanowczo zaprzecza zarzutom, twierdząc, że w dochodzeniu pominięto kwestie przejrzystości i nie przedstawiono przekonujących dowodów. Firma twierdzi, że Cloudflare albo wyolbrzymiło ustalenia, albo całkowicie błędnie zinterpretowało sytuację.

Konsekwencje tego incydentu są znaczące, ponieważ Cloudflare nadal zajmuje zdecydowane stanowisko wobec Perplexity, co stanowi wyzwanie dla działań brandingowych startupu, mających na celu prezentowanie transparentności w stosunku do tradycyjnych wyszukiwarek. Sytuacja ta uwypukla narastający problem w cyfrowym krajobrazie: ciągły konflikt wokół dostępu do treści i ich monetyzacji.

Co więcej, incydent ten rzuca światło na szerszą dyskusję w sektorze sztucznej inteligencji (AI) dotyczącą pozyskiwania danych i wątpliwych praktyk, które mogą pojawić się wraz z rosnącą potęgą i komercjalizacją technologii AI. Dyrektor generalny Cloudflare, Matthew Prince, otwarcie mówił o potencjalnym ryzyku, jakie te modele AI stwarzają dla twórców i wydawców treści. W odpowiedzi Cloudflare oferuje teraz platformę umożliwiającą pobieranie opłat od firm zajmujących się AI za dostęp do treści i zainicjowało automatyczne blokowanie robotów indeksujących AI na swoich platformach.

Źródło i obrazy