tokenisation → αναγνώριση λέξεων, αναγνώριση λεξικών μονάδων, αναγνώριση λεκτικών μονάδων, διαμερισμός στα συστατικά στοιχεία του κειμένου, ανάλυση σε βασικές λεξικές μονάδες, δημιουργία διακριτικών, χρήση διακριτικών
spiros ·
1 · 253