日本語版WikipediaでLDA
「英語版WikipediaでLDA」に続いて、日本語版で試してみる。 日本語の場合は形態素が必要になる。そうすると、ぐぐってみると、jawikicorpus.pyとい…
2015年
英語版WikipediaでLDA
「Wikipediaのデータをスクロールスキャンする」を行ったけど、まずは、Wikipediaのデータに対してLDAを適用してみることにする。日本語への適用は次…
Ubuntu 14.04でlibGL.so.1のエラー
Ubuntu 14.04で $ skype /usr/bin/skype: error while loading shared libraries: libGL.so.1: cannot open shared object file: No such file or di…
PythonでNo module named bz2
以下のようにbz2がないと言われるケースがある。 $ python -m gensim.scripts.make_wiki enwiki-latest-pages-articles.xml.bz2 wiki_en_output /hom…
pyenvでPython環境を利用する
環境によっては、Pythonが古かったり、しかもそれを更新できなかったりする場合があるかと思うけど、そんなときにpyenvでPython環境を作るとよい。 …
Wikipediaのデータをスクロールスキャンする
WikipediaをElasticsearchに取り込むの続き。 いろいろと試していくためには、Elasticsearchに取り込んだWikipediaのデータにアクセスできるようにな…
/sbin/mount.vboxsf: mounting failed with the error
Vagrantでvbguestを使って、VirtualBoxのアドオンを更新していて、VagrantとVirutalBoxを更新したら以下のように怒られるようになった…。 Failed to …
WikipediaをElasticsearchに取り込む
どこまで継続できるかというのはあるけど、Elasticsearchを使って機械学習的なことをちょっとまとめていこうかと。 まず、いろいろとやるためには適…