[心得] NGram 中立斷詞法實做
http://tonytonyjan.github.com/blog/tjngram/
有想要寫 IR System Library 的衝動,
心血來潮在 RubyGems 搜尋了一下看有沒有可用的 N-Grams library,
確實也給我找到幾個,但可惜的是他們只有針對英文做斷詞,沒有針對中日韓。
可想像的到英文的斷詞和中文的斷詞是截然不同的,
但現在許多文章卻又中英日混雜,面對這種文章,那些 library 起不了什麼作用,
所以只好自己寫一個了。
雖然不知道有沒有人用 Rails 寫 IR System,但除此用途之外,
使用 NGram 來爬社群網站的詞彙其實也很好玩XD
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 61.227.144.168
推
07/14 16:38, , 1F
07/14 16:38, 1F
→
07/14 21:08, , 2F
07/14 21:08, 2F
推
07/16 22:39, , 3F
07/16 22:39, 3F
→
07/16 22:49, , 4F
07/16 22:49, 4F
推
07/19 12:33, , 5F
07/19 12:33, 5F
→
07/23 13:31, , 6F
07/23 13:31, 6F
Ruby 近期熱門文章
PTT數位生活區 即時熱門文章