技術ブログ
transformers v4.7.0のリリース
DETR,Roformer,ByT5,HuBERTなどをサポート
transformers Flax+JAXで文章分類を試してみる
transformers Flaxで文章分類の学習をGPUを使っておこなう
transformersでT5,MT5,BYT5の文章要約比較
transformersでT5モデル間で日本語文章要約の比較をしてみました。
transformersでdeepspeedを使ってみる(config編)
transformers+deepspeed(ZeRO-2)のconfigを詳しくみてみる
transformersでdeepspeedを使ってみる(文章分類編)
transformers+deepspeed(ZeRO-2)で大きめモデルを1GPUで学習してみます
transformersでdeepspeedを使ってみる(環境構築編)
transformersの日本語も対応している多言語モデルのパラメタ数などを調べてみました。
transformersモデル毎のパラメタ数など
transformersの日本語も対応している多言語モデルのパラメタ数などを調べてみました。
transformers多言語モデル中の日本語語彙調査
transformersの日本語も対応している多言語モデルで、日本語っぽい語彙がどのくらい含まれているか調べてみました。
huggigface transformersで使える日本語モデルのまとめ
2021/5/27現在のHuggingFace Model Hubの日本語対応モデルをまとめてみました
Techブログ始めました
よろしくお願いします
