La ricerca sul training distribuito su cluster GPU fisici è lenta e dolorosa. Ci siamo imbattuti in questo problema presso @exolabs, quindi abbiamo creato EXO Gym, una libreria per simulare cluster di calcolo eterogenei e condurre rapidamente e facilmente esperimenti di ricerca su qualsiasi scala con un MacBook.

Annuncio di EXO Gym: Simula ambienti di addestramento distribuiti utilizzando solo il tuo laptop. In precedenza, gli esperimenti di addestramento distribuito richiedevano la configurazione di complessi cluster multi-nodo. Con EXO Gym, più nodi virtuali vengono generati all'interno di un unico dispositivo. 🧵

Un primo tentativo di integrare modelli di visione locale in @ASIMOV_Platform Gli effetti combinati del lavoro fondamentale dell'anno scorso significano che aggiungere funzionalità come questa è ora relativamente banale, solo un altro flusso di dati da blocchi di costruzione esistenti. PS. Coloro che mi conoscono potrebbero non essere sorpresi dal fatto che il libro che si trovava sulla mia scrivania sia stato utilizzato come materiale di prova...