throwyn throwyn 21.06.2018, 21:06:34 1 + #programowanie #ruby #python (chociaż niekoniecznie)Mireczki, czy istnieją gotowe słowniki do normalizacji słów/tekstu? Mam dane, w których są różne odmiany słów ["3 jajka", "jajko", "7 jajek"] i potrzebuje zamienić to do jednej formy "jajka".
cxnmlhuipwetr cxnmlhuipwetr 21.06.2018, 21:38:24 0 + @nesti32: stemming to zupełnie nie to, po stemmingu słowo zwykle nie ma poprawnej formy gramatycznej.
czlowiekboruta czlowiekboruta 21.06.2018, 22:22:22 0 + @throwyn: Szukaj jeszcze pod hasłem 'pluralize'. Ruby on Rails ma do tego wbudowany helperhttp://api.rubyonrails.org/classes/ActiveSupport/Inflector.html#method-i-pluralizeAle nie wiem na ile dobrze to działa w językach innych niż angielski
11001100110O11 11001100110O11 22.06.2018, 03:27:19 0 + @throwyn: a nie możesz ich zaindeksować po prostu w ElasticSearch i potem z niego szukać?
Mireczki, czy istnieją gotowe słowniki do normalizacji słów/tekstu? Mam dane, w których są różne odmiany słów ["3 jajka", "jajko", "7 jajek"] i potrzebuje zamienić to do jednej formy "jajka".
http://api.rubyonrails.org/classes/ActiveSupport/Inflector.html#method-i-pluralize
Ale nie wiem na ile dobrze to działa w językach innych niż angielski