🆕 新着Qiita記事をお知らせします。​

​『BERTのmultilingual modelにおける日本語の扱い』
https://qiita.com/tmitani/items/e520e0a085c9e4ee69ed by @tmitani @​Qiita

#python_qiita #nlp_qiita #tokenizer_qiita #bert_qiita

BERTのmultilingual modelにおける日本語の扱い - Qiita

102言語を1つのネットワークで学習したBERT multilingual modelが公開された。その対応言語リストにJapaneseが含まれているものの、単語区切りなどどのように学習されているのか疑問だったので調べてみた。 ht...