Šķiet, ka ChatGPT Search nevar sniegt ziņas pareizi

OpenAI tikko atklāja savu meklētājprogrammu ar nosaukumu ChatGPT Search. Tas būtībā apstiprina, ka AI darbinātās meklētājprogrammas vecums oficiāli ir klāt. Nu, varbūt ne pilnībā. Saskaņā ar jauno ziņojumu ChatGPT Search cīnās ar ziņu saturu.

Tāpat kā Perplexity un Google AI pārskati, ChatGPT Search ir rīks, kas izveido AI ģenerētu pārskatu par to, ko meklējāt. Šos rīkus par meklētājprogrammām padara tas, ka tajos tiek parādītas saites no avotiem, no kuriem viņi ieguva informāciju. Pašlaik tirgū ir tikai dažas lielas AI meklētājprogrammas, taču mēs sagaidām, ka laika gaitā to skaits pieaugs.

ChatGPT Search cīnās ar ziņu saturu

Tā kā ChatGPT Search ir tik jauns, cilvēki to pēta, lai noskaidrotu, kā tā atbilst konkurencei. Pamatojoties uz jaunu pētījumu, jaunajam rīkam viss neizskatās pārāk labi.

Kolumbijas digitālās žurnālistikas centrs Tow Center veica pētījumu par ChatGPT meklēšanu, un tas atklāja dažus satraucošus rezultātus. Lai veiktu pārbaudi, viņi lūdza ChatGPT identificēt 200 citātu avotu no 20 dažādiem ziņu rakstiem. Ja internets ir rokas stiepiena attālumā, jūs varētu sagaidīt, ka ChatGPT ar šo uzdevumu tiks galā ar labu darbu. Ne tikai tas, bet arī OpenAI, izmantojot licences darījumus, var piekļūt desmitiem ziņu vietņu satura.

Tomēr saskaņā ar ziņojumu. Lielākā daļa atbilžu, ko sniedza ChatGPT meklēšana, bija neprecīzas vai nepilnīgas. No 200 atbildēm tā sniedza precīzu informāciju tikai par 47. 57 bija daļēji pareizas un 89 bija pilnīgi nepareizas. Visbeidzot, tā tikai atzina, ka septiņas reizes nav zinājusi atbildi. Ņemiet vērā, ka šis bija diezgan nišas tests.

Vilkšanas centrs sniedza dažus piemērus par dažiem ChatGPT meklēšanas traucējumiem. Pirmkārt, kad tika lūgts iegūt citātu no New York Times raksta, rīks atklāja saiti uz vietni, kurā raksts ir pilnībā plaģiāts. Citā piemērā vietnē Time tika nepareizi attiecināts citāts no Orlando Sentinel stāsta.

OpenAI komentēja šo pētījumu, nosaucot to par “netipisku mūsu produkta testu” un sakot, ka “nepareizu attiecinājumu ir grūti novērst bez datiem un metodoloģijas, ko Tow Center noklusēja.” Tātad OpenAI nav apmierināts ar šo testu. Protams, tas pārliecināja masām, ka tas strādā, lai uzlabotu meklēšanas rezultātus. Mēs neesam pārliecināti, vai tas ir uzņēmums, kas pamatā atzīst, ka ir sajaucis ar ChatGPT meklēšanu. Jebkurā gadījumā mēs esam pārliecināti, ka laika gaitā šādas problēmas būs mazāk izplatītas.