『 形態素解析を必要としないSentencePieceのような深層学習向けのtokenizerも出現しています』2020/12/7 23:04:00 from: darts-cloneを使って最長一致法で分かち書きしてみる