nlp

WER (Word Error Rate)

nlp

WERは単語版レーベンシュタイン距離。http://en.wikipedia.org/wiki/Word_error_rate http://ja.wikipedia.org/wiki/%E3%83%AC%E3%83%BC%E3%83%99%E3%83%B3%E3%82%B7%E3%83%A5%E3%82%BF%E3%82%A4%E3%83%B3%E8%B7%9D%E9%9B%A2

IBM Model メモ

NLP

有名な翻訳モデルであるところの IBM Model 。翻訳モデルというのは、ある単語(列)がどの単語(列)に翻訳されるかという生成モデルです。Model 1 から 5 まである中の Model 1 についてのメモ。基本的な式はj が原言語文 f の長さ、m が目的言語文 e の長さで…

感情抽出手法サーベイ

やりたいこと 作業ディレクトリが吹っ飛ぶという散々な目にあったので、気を取り直して、日本語文章からの感情抽出について調べてみました。素人思考なので注意です。結局はただのメモなので注意。 まずはじめに、何がやりたいのかというと、こちらの単語感…