Hugging Faceと直接連携するProdigy-HFプラグインが登場

Explosionは、Hugging Faceのエコシステムと直接連携する新しいプラグイン「Prodigy-HF」をリリースしました。このプラグインにより、Prodigyでアノテーションされたデータを用いてHugging Faceのモデル(BERTやDistilBERTなど)をファインチューニングできるようになります。コマンドラインから`hf.train.ner`や`hf.train.textcat`レシピを実行することで、Transformerモデルを自身のデータで直接学習させ、ディスクに保存できます。また、アノテーション済みのデータセットをHugging Face Hubに公開する機能(`hf.upload`レシピ)も提供されており、これによりデータセットの共有と共同作業が促進されます。この統合は、特にNERタスクなどでアノテーション作業の時間を節約し、より多くのユーザーが実験を行うことを可能にします。