admin 
Neseniai pasirodžius spaudai, „Openai“ generalinis direktorius Sam Altmanas teigė, kad per pastaruosius kelerius metus pastebėjo AI „IQ“.
„Labai grubiai man atrodo, kad tai nėra moksliškai tikslu, tai tik vibe ar dvasinis atsakymas – kiekvienais metais mes perkeliame vieną standartinį IQ nuokrypį“, – teigė Altmanas.
Altmanas nėra pirmasis, kuris naudoja IQ, asmens intelekto vertinimą, kaip AI progreso etaloną. AI influenceriai socialinėje žiniasklaidoje pateikė modelių IQ testus ir įvertino rezultatus.
Tačiau daugelis ekspertų sako, kad IQ yra prastas modelio galimybių matas – ir klaidinanti.
„Gali būti labai viliojanti naudoti tas pačias priemones, kurias mes naudojame žmonėms apibūdinti galimybes ar pažangą, tačiau tai yra tarsi obuolių palyginimas su apelsinais“, – „TechCrunch“ pasakojo tyrėja, tyrusi techniką ir reguliavimą Oksforde.
Savo komentaruose „Presser“ Altmanas prilygino intelektui intelektui. Tačiau IQ testai yra santykiniai – ne objektyvūs – priemonės tikras intelekto rūšys. Yra tam tikras sutarimas, kad IQ yra pagrįstas logikos ir abstrakčių samprotavimų testas. Bet tai neišmatuoja praktiška Intelektas – žinojimas, kaip viskas veikti, ir tai geriausiu atveju yra momentinis vaizdas.
„IQ yra įrankis žmogaus galimybėms įvertinti – ne mažiau ginčijamas – remiantis tuo, kaip mokslininkai mano, kad žmogaus intelektas atrodo“, – pažymėjo Wachteris. „Bet jūs negalite naudoti tos pačios priemonės apibūdindami AI galimybes. Automobilis yra greitesnis už žmones, o povandeninis laivas geriau nardo. Bet tai nereiškia, kad automobiliai ar povandeniniai laivai viršija žmogaus intelektą. Jūs prilygstate vienam žmogaus intelekto spektaklio aspektui, kuris yra daug sudėtingesnis. “
Norėdami pasižymėti IQ testu, kurios kilmė kai kurie istorikai atsekė eugeniką, plačiai diskredituota mokslinė teorija, kad žmonėms galima pagerinti selektyvų veisimą, testas turi turėti stiprią darbinę atmintį ir žinias apie Vakarų kultūros normas. Tai, be abejo, kviečia šališkumą, todėl vienas psichologas pavadino IQ testus „ideologiškai sugadintais intelekto mechaniniais modeliais“.
Remiantis OS Keyes, Vašingtono universiteto daktaro laipsnio kandidatu, kuris studijuoja etinę AI, gali būti gerai atliktas IQ testas.
„(Šie) testus gana lengva žaisti, jei turite praktiškai begalę atminties ir kantrybės“, – teigė Keyesas. „IQ testai yra labai ribotas būdas išmatuoti pažinimą, jautrą ir intelektą, ką mes žinojome nuo pat paties skaitmeninio kompiuterio išradimo“.
AI greičiausiai taip pat turi nesąžiningą pranašumą atliekant IQ testus, atsižvelgiant į tai, kad modeliai turi didžiulį atminties kiekį ir internalizuotas žinias. Dažnai modeliai mokomi viešų žiniatinklio duomenų, o žiniatinklis yra pilnas pavyzdžių klausimų, paimtų iš IQ testų.
„Testai linkę pakartoti labai panašius modelius – gana nepriekaištingas būdas padidinti jūsų IQ yra praktika atlikti IQ testus, o tai iš esmės yra tai, ką padarė kiekvienas (modelis)“, – sakė Mike'as Cookas, „King's College London London“ mokslo bendradarbis, kurio specializacija yra AI, specializuojasi AI . „Kai ko nors išmokau, aš to nepanaudoju į savo smegenis visiškai aiškiai, skirtingai nei AI, ir aš taip pat negaliu jo apdoroti be triukšmo ar signalo praradimo.“
Galų gale IQ testai-šališki, kokie jie yra-buvo skirti žmonėms, pridėtoms Cookui, buvo skirtas kaip būdas įvertinti bendrąsias problemų sprendimo gebėjimus. Jie netinkami technologijai, kuria siekiama išspręsti problemas labai skirtingai nei žmonės.
„Varna gali naudotis įrankiu, kad būtų galima atkurti skanėstą iš dėžutės, tačiau tai nereiškia, kad ji gali įstoti į Harvardą“, – teigė Cook. „Kai išspręsiu matematikos problemą, mano smegenys taip pat ginčijasi dėl savo sugebėjimo teisingai skaityti žodžius puslapyje, negalvoti apie apsipirkimą, kurį turiu padaryti pakeliui namo, arba jei šiuo metu kambaryje per šalta. . Kitaip tariant, žmogaus smegenys susiduria su daug daugiau dalykų, kai išsprendžia problemą – bet kokią problemą, IQ testus ar kitaip – ir jie tai daro su daug mažiau pagalbos (nei AI.) “
Visa tai rodo, kad reikia geresnių AI testų, – „TechCrunch“ pasakojo Heidy Khlaafas, vyriausiasis AI instituto mokslininkas.
„Skaičiavimo istorijoje mes nelyginome skaičiavimo gebėjimų su žmonių gebėjimais būtent todėl, kad skaičiavimo pobūdis reiškia, kad sistemos visada galėjo atlikti užduotis, kurios jau viršija žmogaus galimybes“, – teigė Khlaafas. „Ši idėja, kad mes tiesiogiai lyginame Sistemų veiklą su žmogaus sugebėjimais, yra nesenas labai ginčijamas reiškinys, ir tai, kas supa nuolat besiplečiančių ir judančių etalonus, sukuriamus AI sistemoms įvertinti.“
