AI要約 GoogleはPyTorch向けにGCSFSとRapid Bucketを統合し、分散ファイルシステムColossusへの直接アクセスを可能にした。これによりAI学習・チェックポイントのI/Oが大幅に高速化され、GPU/TPUの待ち時間削減が期待される。

EN Google has integrated GCSFS and Rapid Bucket into PyTorch workflows, exposing its Colossus distributed file system directly to AI training jobs and dramatically reducing checkpoint and data loading latency for GPU and TPU clusters.

AI要約 AWSは、S3バケットを通常のファイルシステムのようにアクセス可能にする新機能「S3 Files」を発表した。既存アプリケーションを改修せずにS3上のオブジェクトをファイルとして読み書きでき、クラウドストレージとファイルベース処理の橋渡しを担う。

EN Amazon S3 Files makes S3 buckets accessible as high-performance file systems on AWS compute resources, eliminating the tradeoff between object storage benefits and interactive file capabilities while

AI要約 Hugging Faceは、組織がリポジトリのデータを自社のクラウドストレージ(AWS S3等)に保存できるStorage Buckets機能を発表した。データ主権やコンプライアンス要件に対応しつつ、Hub上のUIやAPIをそのまま利用できる点が特徴。

EN Introducing Storage Buckets on the Hugging Face Hub