Sto aggiornando la traduzione di libchasen0, ma ho dei problemi con la traduzione di tokenize.
Questo è il testo in inglese: ChaSen is a morphological analysys system. It can segment and tokenize Japanese text string, and can output with many additional informations (pronunciation, semantic information, and others). Utilizzare sillabare per tokenize è corretto?
