Amazon hävitab haruldasi raamatuid tehisintellekti treenimiseks

Amazon ostab haruldasi raamatuid, lõikab nende seljad ära ja skannib tekstid tehisintellekti treenimiseks, vahendab 404 Media. Väljaanne paigutas jälgimisseadme ühte haruldasse raamatusse, mis jõudis lõpuks Amazoni Las Vegases asuvasse rajatisse.

VGT3 nime kandva rajatise sümboliks on raamatut küüniste vahel hoidev dinosaurus. Amazon ütles 404 Mediale, et ettevõte „ostab raamatuid kommertskanalite kaudu, et täiustada tooteid ja teenuseid, mida kliendid kasutavad“.

Tehisintellekti keelemudelite ehk LLM-ide treenimiseks vajavad ettevõtted tohutul hulgal teksti. Internetis leiduvaid materjale on juba suures osas kasutatud ning haruldased, trükist kadunud või internetist raskesti leitavad raamatud pakuvad seetõttu uut väärtuslikku treeningandmete allikat.

Vanemad tekstid on tehisintellekti arendamisel eriti hinnatud, kuna enne 2022. aastat avaldatud teoste puhul pole võimalik, et need oleks kirjutanud LLM. Tehisintellekti loodud tekstidega mudelite treenimine võib viia niinimetatud mudeli kokkuvarisemiseni, mille puhul hakkab mudeli väljundite kvaliteet pärast liiga suure hulga tehisintellekti loodud teksti töötlemist halvenema.