Google for Developers (@googledevs)

Google Colossus를 PyTorch에서 더 빠르게 활용할 수 있도록 Rapid Bucket과 fsspec(GCSFS) 기반 개선을 소개한다. 읽기 4.8배, 쓰기 2.8배, PyTorch Lightning에서 전체 학습 시간 23% 단축 등 대규모 학습 성능 향상이 핵심이다.

https://x.com/googledevs/status/2049534176173383982

#pytorch #googlecolossus #fsspec #gcsfs #pytorchlightning

Google for Developers (@googledevs) on X

Bring the power of #GoogleColossus to #PyTorch with Rapid Bucket + fsspec (GCSFS). 🔹 4.8x faster reads 🔹 2.8x faster writes 🔹 23% faster total training time with PyTorch Lightning Keep your GPUs fed and your workloads moving. Learn more: https://t.co/SgPrYbPjYl

X (formerly Twitter)