ScienceIDE: trasformare il codice scientifico del mondo in ambienti di apprendimento per agenti

Abstract degli autori

I repository di codice scientifico racchiudono decenni di conoscenze umane sotto forma di modelli, metodi e strumenti eseguibili. Tuttavia, catene di strumenti frammentate, convenzioni di dominio implicite e criteri di correttezza specialistici rendono difficile trasformare queste conoscenze in esperienze di apprendimento affidabili: una sfida che chiamiamo collo di bottiglia dell’esperienza scientifica. Presentiamo ScienceIDE, un’infrastruttura per trasformare il codice scientifico del mondo in ambienti programmabili per agenti scientifici. Guidati da casi scientifici e criteri di accettazione definiti da esperti, gli agenti trasformano i repository in ambienti eseguibili che supportano la generazione di compiti, l’esecuzione e la verifica scientifica. Questi ambienti forniscono una base comune per il fine-tuning supervisionato, il reinforcement learning e la valutazione. Utilizzando traiettorie di interazione verificate, addestriamo PhAI-IDE-72B, PhAI-IDE-9B e PhAI-IDE-4B. La famiglia di modelli mostra miglioramenti nella riparazione di codice scientifico non visto durante l’addestramento e in una selezione di benchmark di uso generale su programmazione, ragionamento e conoscenze, fornendo prove di un trasferimento positivo dall’esperienza scientifica a capacità più ampie. ScienceIDE getta le basi per uno spazio di lavoro integrato dedicato all’apprendimento degli agenti e alla pratica scientifica, rendendo il software scientifico dell’umanità una base condivisa per lo sviluppo dell’intelligenza scientifica. Codice: https://github.com/aitofound/ScienceIDE