L’origine del nuovo mondo. Come abbiamo inventato i Large Language Models

È ancora troppo poco nota l’origine degli LLM. In realtà possibili solo grazie a decenni di ricerche nel campo della machine translation. Tradotto: se oggi abbiamo l’intelligenza artificiale generativa, è solo perché a lungo abbiamo cercato di capire come insegnare alle macchine a tradurre. Un lungo percorso che ha un suo momento cruciale nel 2017, con l’invenzione del Transformer (Chat-GPT sta per Generative Pre-trained Transformer), basato sull’idea che fosse tutta una questione di attenzione. È possibile insegnare alle macchine a fare una delle cose più umane che esistano: prestare attenzione? E come, in questo ultimo decennio, dall’invenzione del Transformer in poi, l’effetto collaterale dello sviluppo della machine translation ha prodotto gli LLM? Cosa ci dice questo sui prossimi sviluppi dell’IA generativa?