Ņujorka, Amerikas Savienotās Valstis, 2026. gada 10. novembris, TechnologyWire
- YouGov izveidoja 1008 “E-dvīņus” un pārbaudīja tos ar 693 reāliem, ar valsts ID pārbaudītiem cilvēkiem, no kuriem tie tika veidoti, uzdodot abiem tos pašus jaunos jautājumus.
- Dvīņu rezultāti tika apstiprināti, veicot atkārtotu saziņas aptauju, kurā piedalījās žūrijas dalībnieki 48 stundu laikā
- Dvīņi, kuri tika apmācīti, pamatojoties uz 4000+ zīmolu un vienību ekspertu vērtējumiem, savu cilvēku pielīdzināja viena punkta robežās piecu punktu skalā 90% gadījumu salīdzinājumā ar 78% tikai profilēšanas datiem.
- Dvīņi trāpa par 90% par tēmu, par kuru viņi nekad netika apmācīti
- YouGov aicina nozari vienoties par validācijas standartiem un izaicina katru simulatoru publiski prognozēt reālās pasaules rezultātus
YouGov, starptautiskā pētniecības un datu analīzes grupa, šodien publicēja balto grāmatu par vienu no viscaurredzamākajiem testiem, kas līdz šim tiek veikti, lai veiktu cilvēka-digitālo dvīņu simulāciju.
Tā vietā, lai salīdzinātu apkopotos rezultātus ar publiskajām datu kopām, revolucionārajos pētījumos katrs AI dvīnis tika pārbaudīts atsevišķi, salīdzinot ar tā cilvēku.
Sadarbojoties ar OriginalVoices — mākslīgā intelekta platformu, kas specializējas simulācijās, YouGov izveidoja digitālos dvīņus — uz LLM balstītas reālu cilvēku attieksmes simulācijas, ko tā sauc par “E-dvīņiem” — no 1008 valdības ID pārbaudītiem sava patentētā paneļa locekļiem. Pēc tam tā uzdeva tos pašus jaunos jautājumus gan E-dvīnim, gan reālajam atbildētājam. Pilnībā 69% dalībnieku atbildēja 48 stundu laikā, sniedzot tiešu pārbaudi par savu E-dvīņu precizitāti. Ikdienas darbībās šo validāciju var veikt tikai stundas laikā.
Galvenie atklājumi no Yougova AI dvīņu testēšanas:
- Bagātinātu datu disku precizitāte. Pievienojot žūrijas dalībnieku vērtējumus par 4000+ entītijām, cilvēku līmeņa precizitāte (viena punkta robežās piecu punktu skalā) tika paaugstināta no 78% uz 90%.
- YouGov E-dvīņi atbildēja uz to, kas viņiem nekad netika mācīts. Daiļliteratūras grāmatas nebija daļa no apmācības datiem, taču, jautājot par tām, E-dvīņi joprojām bija viena punkta attālumā no viņu cilvēka 90% laika.
- Twin Confidence dziesmas ar precizitāti. Katrai atvērtai atbildei, ko sniedz digitālais dvīnis, OriginalVoices piešķir ticamības līmeni (augstu, vidēju vai zemu). Grupas dalībnieki teica, ka atbilde “ļoti” vai “nedaudz” labi raksturoja viņu pašu uzskatus 81% augstas ticamības atbilžu, 72% vidēja un 67% zemas atbildes, sniedzot pētniekiem praktisku ceļvedi, kā uzticēties atsevišķiem dvīņiem.
- YouGov īstie paneļu dalībnieki regulāri identificējas ar saviem dvīņu viedokļiem. 75% gadījumu diskusiju dalībnieki uzskatīja, ka viņu E-twin atvērtās atbildes raksturo viņu pašu uzskatus.
- Mazāk stereotipu. Kontekstuālāki apmācības dati samazināja dvīņu paļaušanos uz demogrāfiskajiem datiem, bez novirzēm vecuma, dzimuma, rases vai izglītības ziņā.
Pašreizējās simulācijas ir veidotas uz nestabiliem pamatiem
YouGov saka, ka liela daļa pierādījumu, ko līdz šim piedāvājuši simulatori visā nozarē, balstās uz publiski pieejamām datu kopām. Šie jautājumi jau var būt iekļauti pamatā esošo valodu modeļu apmācības datos, tāpēc dvīnis var šķist, ka zina atbildi, ko tas vienkārši ir absorbējis, un ar respondentiem nevar sazināties, lai pārbaudītu rezultātus. Apkopotie salīdzinājumi var arī maskēt dvīņus, kas saplacinās uz vidējo vai stereotipu.
Imitēto datu nodrošinātājiem ir jāparāda savs darbs
YouGov aicina nozari izstrādāt kopīgus verifikācijas un validācijas standartus noteiktiem lietošanas gadījumiem. Tas izaicina visus simulatorus sekot tās vadībai, lai pārbaudītu dvīņus pret viņu individuālo cilvēku, pārbaudītu tos par neredzētām tēmām, publicētu viņu metodes, parādītu viņu kļūdas un publiski prognozētu reālās pasaules rezultātus.
Stephan Shakespeare, YouGov izpilddirektors un līdzdibinātājs: “Pētniecības nozari AI pārveido daudzos veidos, bet jo īpaši, ja runa ir par simulāciju. Tas, vai tā ir bīstama attīstība vai labvēlīgs progress, ir atkarīgs no tā, vai klienti var zināt, vai tā rezultāti ir uzticami. Es aicinu visus nozares pārstāvjus sadarboties, lai izveidotu standartus simulēto datu pārbaudei un apstiprināšanai. Šajā baltajā grāmatā ir parādīts, kas, mūsuprāt, būtu jāietver šajos standartos, tostarp spēju, ja klients vēlas, lai tā vienlaikus tiktu apstiprināta ar sabiedrības uzticamību. tas ir jānopelna, un to var panākt tikai ar plaši saskaņotiem standartiem.
YouGov baltajā grāmatā ir publicētas arī nepilnības, kas tiks novērstas turpmākajā analīzē. Pašreizējā pētījumā netika mērīti griesti – cik bieži cilvēks atkārto savu atbildi uz vienu un to pašu jautājumu. Dvīnis nevar saprātīgi pārspēt personu, kuru tas kopē: ja diskusiju dalībnieki atkārtotu savu vērtējumu 70% gadījumu, dvīņu 58% precīzās atbilstības rādītājs būtu 83% no šiem griestiem. YouGov to pārbaudīs nākamajā sava pētījuma atkārtojumā.
Izlasiet visu balto grāmatu: digitālo dvīņu novērtējums, pamatojoties uz YouGov paneļa datiem
Par YouGov
YouGov ir globāla pētījumu datu un analītikas grupa. Mūsu misija ir sniegt nepārspējamu ieskatu par to, ko pasaule patiesībā domā un dara. Darbojoties Amerikā, kontinentālajā Eiropā, Apvienotajā Karalistē un Āzijas un Klusā okeāna reģionā, mums ir viens no pasaulē lielākajiem pētniecības tīkliem.
Pats galvenais, YouGov darbina realitāte. Tas izriet no unikāla paneļa, kurā ir miljoniem reģistrētu dalībnieku 64 tirgos, kas aptver aptuveni 21 miljonu iepirkšanās braucienu un miljoniem savstarpēji saistītu datu punktu. Mūsu unikālā pieeja darbā pieņemšanai un iesaistīšanai mūsu panelī, apvienojumā ar mūsu jaunākajām tehnoloģiju platformām, ļauj mums sniegt reāllaika reāllaika ieskatu, kas ļauj labāk pieņemt lēmumus un nodrošināt konkurences priekšrocības mūsu klientiem.
Kā tiešsaistes tirgus izpētes novatori un pionieri mums ir spēcīga reputācija kā uzticams precīzu datu un ieskatu avots. To apliecina globālā prese regulāri atsaucas uz YouGov datiem, un mēs pastāvīgi esam viens no visvairāk citētajiem tirgus izpētes avotiem pasaulē.
Lai iegūtu papildinformāciju, apmeklējiet vietni yougov.com
Sazināties
PR vadošais Amerikas Savienotās Valstis
Alens Hjūstons
YouGov
(aizsargāts ar e-pastu)
