提案手法とベースラインが有意差があるかを調べるためには、対応のあるt検定を行なう必要があります。そこで練習のためにハンバーガー統計学にようこそ！に出ていた例をPythonで実装してみました。8人の女子高生が2種類のハンバーガーを食べて、下表の得点を…

ソースコード貼り付けるときに色つけたいなー、と思ったら簡単できた。 ソースコードを色付けして記述する（シンタックス・ハイライト） - はてなダイアリーのヘルプ >|python| # -*- coding: utf-8 -*- for i in xrange(10): print i, "hello, world!" ||<…

モチベーション ある文章中にどのような単語がよく出現するか調べることは、基本的な分析手法の１つです。１文節のみを対象とする場合は形態素に分けて頻度を数えればいいですし、２文節以上でも既知語ならば簡単に取得できます。しかし、複数の単語からなる…

ユニットテストを行う際に面倒なのが、外部のデータベースを利用している場合です。 ここではmoxというモックを使ってMySQLdbのテストを行なう方法を紹介します。 moxはpythonのモックライブラリの一種で、JavaのEasyMockを元にしています。 詳細はpymoxのペ…

文書分類などを行なう場合にはSVMlightやLIBSVMなどのライブラリを使います。 その場合素性名を数値にする必要があるので、 変換する関数converter.pyを作ってみました。 （Classiasという素性に任意の文字列が使えるライブラリもあります） 素性を数値に変…

なんとなくJavaScriptから逃げていたんですが、Webサービスを作ろうとするとやっぱり必要ですね。 ということでAjaxのお勉強です。 main.htmlのボタンを押すと、ページ遷移なしにtsuika.htmlの内容を読み込みます。 ポイントはload_entity.jsの最終行にある …

最近ネットを見ていると面白そうな勉強会をたくさん見つけます。 「Python Hack-a-thon」とか「PRML復習レーン」とか行きたかったのですが、 人気のある勉強会はすぐに満員になってしまいます。 自分の必要なイベント情報だけを取得したいのでATNDのRSSも使…

情報系学生のいいところは、どこにいても研究が進められることです。 しかし論文のダウンロードなどはIPアドレス制限があるため、どうしても学内からインターネットに接続する必要があります。 これまでは毎回大学に行っていたのですが、面倒なので家から行…

実験で質的データ同士の相関を見る必要があり、カイ２乗検定のプログラムを探していました。ベクトルを対象にしたもの（scipy.stats.chisquare）はすぐに見つかりましたが、一番使うであろう行列を対象にしたカイ２乗検定のプログラムが見つからなかったので…