BLOGTIMES
::
Home > Solr1.4-devとcmecab-java
2009/06/29
[ by hsur at 21:32]

Solr1.4-devとcmecab-java

  

最近Solrでつくる検索サーバーが個人的にちょっとホットなので、自分でも環境構築をしてみました。

Solr 1.3で日本語の形態素解析に基づくインデックスを作りたい場合senのダウンロードページにあるlucene-ja-2.0test2.zipからlucene-ja.jarとsen.jarを取り出してlibに配置し、schema.xmlに下記を追加するように指示*1している場合が多いようです。

<fieldType name="text_sen" class="solr.TextField">
  <analyzer class="org.apache.lucene.analysis.ja.JapaneseAnalyzer"/>
</fieldType>

今回は最新の開発版であるSolr 1.4を入れてみたので、同様の方法を試したところエラーが出てうまく動かす事が出来ませんでした。仕方が無いので、なにか使えるのもが他にないかと探してみたところ、cmecab-javaというMeCabのJNIバインディングのプロジェクトに下記のようなリリースノートを見つけました。

ReleaseNote - cmecab-java - リリースノート - Google Code

v1.6 (2009/5/25)
* Solr 1.4向けに、CharStreamに対応した一連のTokenizer, TokenizerFactoryを追加。
* パフォーマンス向上が見られないため、Pooled系のTokenizerを廃止。
* senにバッファオーバーフロー防止パッチを当てたものを同梱。

これを使う場合にはcmecab-(ver).jar、protobuf-java-2.1.0.jar、sen.jarをlibに配置し、schema.xmlには使用方法の解説にあるとおり、下記の内容を書き加えます。

<!-- Senを用いたTokenizer -->
<fieldType name="text_sen" class="solr.TextField">
    <analyzer>
        <!-- confFileパラメータには、Senの設定ファイル(sen.xml)のパスを指定 -->
        <tokenizer class="net.moraleboost.solr.SenTokenizerFactory" confFile="/etc/sen/sen.xml" />
    </analyzer>
</fieldType>

これでうまく動かす事ができるようになりました。

それにしてもSolrはよくできていますね。ファセットカウントが簡単に出せたりとか、絞り込みができたりとか。以前、JavaからLuceneを使ってインデックスを作る作業をしたことがあるのですが、そのときにはこのようなインデックスサーバが簡単にできるようになるとは思ってもみなかったなぁ。

[5年前][4年前][3年前][2年前] | Category: Tips | / / | Views: 665
このエントリは役に立ちましたか？
こんな記事もあります 「Solr cmecab-java jar」
・「Fess」 検索アプライアンス並みにすぐ使える検索サーバー
・Solr 1.4 リリース
・Solr-rubyでmultiValuedなフィールドにデータを入れる
・Solr 1.4 Enterprise Search Server
・Search User Interfaces
・Solr-rubyで複数のドキュメントを一括Post
・regextesterでJava 正規表現をデバッグ
・Solrに入門してみる
・あなたのソースコードはきれいですか？
・Googleのエイプリルフールはシャレになってない
・tools.jarを使わないでソースコードをコンパイルする
・iTwitterMobile
・テスト学会なんてあるんだ
・Winstone Servlet Container v0.8
・Winstone というサーブレットコンテナを知っていますか？
・AOPの実践投入をためらう理由
・CVSの開発履歴をグラフィカルに表示する StatCVS
・NP_Paint v1.4β
トラックバックについて
Trackback URL:
お気軽にどうぞ。トラックバック前にポリシーをお読みください。[policy]
このエントリへのTrackbackにはこのURLが必要です→http://blog.cles.jp/item/3100
Trackbacks
このエントリにトラックバックはありません
Comments
愛のあるツッコミをお気軽にどうぞ。[policy]
古いエントリについてはコメント制御しているため、即時に反映されないことがあります。
コメントはありません
Comments Form

コメントは承認後の表示となります。
OpenIDでログインすると、即時に公開されます。

OpenID を使ってログインすることができます。

Identity URL: Yahoo! JAPAN IDでログイン

Web Services by Yahoo! JAPANPowered by NP_SpamBayesJP
★下記に2つの英単語をスペースで区切って入力してください
::
Home > Solr1.4-devとcmecab-java
Copyright © 2004-2010 by CLES All Rights Reserved.
sp-20100319174559644595555@cles.net