vibrato 0.5.2

Vibrato: viterbi-based accelerated tokenizer

1
2
3

京都東京都,6,8,-1000,カスタム名詞
kampersanda,7,7,-2000,カスタム名詞
ヴェネツィア,0,0,0,名詞,固有名詞,地名,一般