Moritz Hardt vill gera gervigreind-prófanir að vísindi, ekki dökku list

Prófanir og mælingar eru meginstoðir gervigreindarsviðsins. Þær virka eftir einföldu kerfi: ef þú vilt vita hvað gervigreindarlíkan getur gert, þá búir þú til staðlaða próf til að meta það. En prófanir fyrir gervigreind geta einnig stjórnað hegðun alls sviðsins og stýrt þróun tækninnar í ákveðna átt.

Moritz Hardt, höfundur nýrrar bókar um þetta efni, bendir á að þessar prófanir séu ekki endilega góðar mælingar á raunverulegri getu kerfa. Hann telur að margar prófanir séu illa hönnuðar og geti leitt til þess að fyrirtæki og vísindamenn einbeiti sér að því að bæta einungis stig á prófunum, en ekki að bæta raunverulega getu kerfanna.

Hardt telur að það sé hægt að bæta þetta kerfi með því að gera prófanir fyrir gervigreind að raunverulegri vísindum. Það myndi þýða að nota strangar aðferðir, skýra skilgreiningar og endurteknar prófanir til að tryggja að prófanir mæli það sem þær segja að þær mæli.