Приятно, что идея строить векторные представления для частей слов, воплощенная в этой программке
https://github.com/Koziev/Word2Vec/blob/master/PyUtils/wordparts.py, была шагом в верном направлении, если внимательно посмотреть на статью "
Enriching Word Vectors with Subword Information" от группы разрабов из FB.