#fsdp

Hoe train je een AI-model op duizenden GPU's tegelijk?

Een groot AI-model past niet op één chip. Zo verdelen AI-labs de training over duizenden GPU's, en waarom dat datacenters, stroom en geld kost.