MBRMその後

実装したMBRM、CRM(Continous-space Relevance Model)の認識結果がひどい。特に、University of Massachusettsからの報告によると、MBRMは既存のアルゴリズムと比較して段違いに良い結果(Coral dataセットを使用した実験において、precision 0.74, recall 0.78)を残しているにもかかわらず、こちらで同アルゴリズムを実装して、実験した結果では、precision 0.002, recall 0.004程度と惨憺たる結果。共同研究している博士過程の学生によれば、precisionとrecallの算出方法が、University of Masschusettsの研究者達とは違うので、低くでるらしいのだが、こちらで実装した他のアルゴリズムと比較しても相当悪い。本来なら、少なくとも他のアルゴリズムよりは、良い結果が期待されるのですが.. きっとバグがあるに違いないと思う。MATLABで同じアルゴリズム検証するため、しばしMATLAB用のスクリプトを準備中... MATLABかなり便利ですね、もっと早く使いはじめてれば良かった。