Že dolgo so nas opozarjali, da roboti prevzemajo naša delovna mesta, zdaj pa prihajajo po naše mnenje.
ID klicatelja, mobilni telefoni že dolgo silijo tržne raziskovalce in anketarje k izvajanju anket na spletu, namesto da bi dosegli ljudi po telefonu. Reševanje problema dobave pa je povzročilo problem kakovosti, saj so goljufi pošiljali nenaročene ankete z lažnimi odgovori.
Na splošno je bila to uspešna poteza: tržne raziskave so postale svetovna industrija vredna 81 milijard dolarjev. Toda revolucija AI je opolnomočila slabe akterje, kar ogroža samo kakovost raziskav, ki podpirajo globalno poslovno strategijo. Čeprav ni nepremostljiv, je ta izziv zadnji opomnik, da morajo biti tržni raziskovalci vedno pozorni na spreminjajoče se grožnje.
Ta poteza na spletu je ustvarila nov razred prodajalcev, ki dobavljajo vnaprej izbrane, predhodno pregledane skupine ljudi za ankete. Geodeti lahko naročijo plošče po meri, ki ustrezajo anketnemu izzivu.
Prinesel je tudi bote – virtualne robote, programirane za zasipavanje anket z odgovori. Verjetno ste že naleteli na grobe primere tega, če ste kdaj videli odmevno anketo na Twitterju, vendar je isto taktiko mogoče uporabiti za verodostojne ankete. Naše lastno testiranje je pokazalo, da medtem ko široke javnomnenjske raziskave (najboljši primer politične ankete o konjskih dirkah) ostajajo večinoma nespremenjene s stopnjami goljufij v višini 2-3%, tržne raziskave med podjetji kažejo stopnje od 30-50%.
Zakaj? Nekateri slabi igralci uporabljajo robote, da pridobijo koristi od izpolnjevanja anket (na primer, ko so kot spodbude ponujeni denar ali druge nagrade). Drugi imajo interes ovirati prizadevanja podjetja pri raziskavah trga ali pa se preprosto želijo zapletati s podjetjem – napad z zavrnitvijo storitve. In nekatere zanima samo kaos zaradi njega samega.
Ko se je glasovanje preselilo na splet, se je zgodilo naravno obračanje naprej in nazaj, pri čemer so anketarji razvijali načine za odpravo botov, nasprotniki pa so razvijali rešitve. Odprta vprašanja – na primer »Opišite svoje najljubše počitnice« – so se dokaj dosledno uporabljala za odkrivanje botov, vendar je zaradi generativne umetne inteligence ta pristop postal neučinkovit. Ali opravite popolnoma avtomatiziran javni Turingov [test za ločevanje] računalnikov in ljudi ali CAPTCHA.
Veste, tiste uganke, ki se včasih pojavijo, ko nekaj vtipkate na spletno stran, kjer morate prepoznati, na kateri sliki je kolo ali most? Delo so opravljali že nekaj časa, vendar je študija kalifornijske univerze Irvine, objavljena lansko poletje, pokazala, da so roboti pri reševanju težav zdaj boljši od ljudi.
Odprta vprašanja in CAPTCHA so bili del serije testov, ki so jih anketarji v preteklih letih uporabljali za boj proti botom. Ena od prvih stvari, ki smo se jih naučili, je bila, da morate hkrati uporabiti različne preglede nadzora kakovosti, da zagotovite, da dobite dobre podatke. Upad CAPTCHA in vse večja neučinkovitost odprtih vprašanj samo poudarjata potrebo po nadaljnjem razvoju in inovacijah.
Kako bo videti? En nov korak vključuje vključitev slik v preizkuse kakovosti. AI zdaj morda lahko najdejo določen predmet na sliki, vendar imajo še vedno težave pri opisovanju slike, kot bi jo opisali ljudje. Pri našem testiranju je ta metoda pokazala več kot dvakrat več odgovorov slabe kakovosti kot preprosta uporaba odprtih vprašanj. V nekaterih primerih je umetna inteligenca bolj zapletena kot bi bili pravi ljudje; v drugih jih njihovo programiranje spotakne. V nekaterih primerih, ko smo vključili slike ljudi, so odgovorili, da slike ne morejo oceniti, ker kot umetna inteligenca ne smejo ocenjevati slik z obrazi.
Nimamo zanesljivih podatkov o tem, katere slike se najbolje obnesejo. Smiselno je, da ne uporabljate tistih, ki so sami na spletu, kjer lahko bot zajame napis ali metaopis. Zdi se, da tudi preproste slike delujejo bolje, zaradi česar AI manj potrebuje pretirano elaboracijo.
To ne bo delovalo večno. Prevaranti uspevajo, anketarji pa parirajo naprej in nazaj. "Ne pozabite," mi je dejal ChatGPT, ko sem ga vprašal o tej temi, "boj proti generativni AI zlasti zahteva, da ste na tekočem z najnovejšim razvojem odkrivanja AI in nenehno prilagajate svoje strategije, ko se AI razvija."
Bot skoraj vedno zmaga. Poskrbeti moramo, da bodo tudi ljudje.
OPOMBA: Newsexchange stran ne prevzema nobene odgovornosti glede komentatorjev in vsebine ki jo vpisujejo. V skrajnem primeru se komentarji brišejo ali pa se izklopi možnost komentiranja ...
Komentarji 0
Slike:
(0%)
