English ⇄ German Japanese Russian Ukrainian

tokenizing n stresses
progr.	маркирование (ssn); разбиение на лексемы (ssn); выделение лексем (ssn)
tokenize v
comp.	пометить; помечать; снабжать метками
progr.	маркировать (ssn); разбивать на лексемы (ssn); выделять лексемы (ssn)
tokenized v
IT	размеченный

tokenizing: 5 phrases in 2 subjects

Microsoft	1
Programming	4