https://github.com/google/sentencepiece
分かち書き
2020/11/26 18:11:00
MeCab cross-compiled to WebAssembly
2020/12/7 23:12:00
『精度は粗いが高速で分かち書きができる最長一致法』
2020/12/7 23:07:00
darts-clone
2020/12/7 23:06:00
『 形態素解析を必要としないSentencePieceのような深層学習向けのtokenizerも出現しています』
2020/12/7 23:04:00
darts-cloneを使って最長一致法で分かち書きしてみる
2020/12/7 23:02:00
TinySegmenter
2020/12/5 23:14:00
wasm使ったら、ブラウザ上で高速に分かち書きできたりしないかな
2020/11/26 3:08:00
wasm使ったら、ブラウザ上で高速に分かち書きできたりしないかな