t_wの輪郭
RSS
分かち
2023/9/10 22:06:00
分かち書き
わかちがき
分かち
書き
分かち書き
2020/11/26 18:11:00
wasm使ったら、ブラウザ上で高速に分かち書きできたりしないかな
TinySegmenter
SentencePiece
darts-cloneを使って最長一致法で分かち書きしてみる
darts-clone
『精度は粗いが高速で分かち書きができる最長一致法』
MeCab cross-compiled to WebAssembly
『 形態素解析を必要としないSentencePieceのような深層学習向けのtokenizerも出現しています』
MeCab
本部長の分かち書き問題