Habana LabsとHugging FaceがTransformerモデルのトレーニングを加速する提携を発表
Habana Labs and Hugging Face Partner to Accelerate Transformer Model Training
深層学習プロセッサメーカーのHabana Labsと、Transformerモデルで知られるHugging Faceが提携し、Transformerモデルのトレーニングをより迅速かつ容易にする。HabanaのSynapseAIソフトウェアスイートとHugging FaceのOptimumライブラリの統合により、データサイエンティストや機械学習エンジニアは、数行のコードでHabanaプロセッサ上でのTransformerトレーニングを高速化できる。Habana Gaudiトレーニングソリューションは、Amazon EC2 DL1インスタンスやSupermicro X12 Gaudi AIトレーニングサーバーで利用可能で、従来のソリューションと比較して最大40%低価格で同等のパフォーマンスを提供する。Gaudiプロセッサには10個の100ギガビットイーサネットポートが搭載されており、1台から数千台規模のシステム拡張が容易である。SynapseAIはTensorFlowとPyTorchをサポートし、コンピュータビジョンや自然言語処理に最適化されている。Hugging Faceは60,000以上のGitHubスター、30,000以上のモデル、数百万の月間訪問者を持つオープンソースプロジェクトであり、機械学習コミュニティで広く利用されている。
- Habana LabsとHugging Faceが提携し、SynapseAIとOptimumライブラリを統合してTransformerモデルのトレーニングを高速化することを発表
- Habana GaudiトレーニングソリューションがAmazon EC2 DL1インスタンスおよびSupermicro X12 Gaudi AIトレーニングサーバーで利用可能であることが発表
Habana Labs(Intel子会社)とHugging Faceの統合は、AIトレーニングの民主化を加速させる。注目点は、(1) GaudiプロセッサがNVIDIA同等性能を40%低価格で実現している点、(2) Amazon EC2 DL1やSupermicroサーバーですぐに利用可能な点、(3) 業界標準のPyTorch/TensorFlow対応によりスイッチングコストが低い点。IntelがAIアクセラレータ市場でNVIDIAに対抗する布石として、またHugging Faceエコシステムのハードウェア依存度低減という点で、半導体・AI両面から重要な提携である。