オブジェクトの広場はオージス総研グループのエンジニアによる技術発表サイトです

2021
10
月号

今月もオブジェクトの広場をお楽しみください。記事に対する感想は、ぜひ公式Facebookページのコメント欄までお願いいたします。(2021.10.20)

はじめての自然言語処理 第17回 ByT5 と Charformer の検証

トークナイザを使わない自然言語処理モデルである ByT5 と Charformer のご紹介です。従来の自然言語処理では多くの場合で文章を単語(あるいはサブワード)単位に分かち書きして処理しましたが、今回のモデルは直接、生のテキストを処理します。それでは実際に動かして単語(サブワード)ベースのモデルと比較してみましょう。

11月号は、11月下旬頃の公開予定です。

From Editors
在宅勤務生活にもすっかり慣れ、たまの通勤が貴重な運動となった結果、この1年強で過去最高の体重増。重すぎる腰を上げて宅トレを始めました。今のところ続いています。腰痛は改善したものの、体重は減らず…。長い目で頑張ります(SR)