第6回 全文検索を実装したソースコードを読もう 倉貫 義人 松村 章弘 TIS株式会社 SonicGarden 2009/9/3 優れたプログラマはコードを書くのと同じくらい、コードを読みこなせなくてはならない。優れたコードを読むことで、自身のスキルも上達するのだ（編集部） いよいよオープンソースの社内SNS「SKIP」を使ったコードリーディングも最終回となりました。Railsの基本的な構成から、テストコードやRSpecの書き方といった内容に加え、前回はOpenIDをRailsで活用する応用編まで、コードとともに学んできました。 最終回となる今回は、SKIPの目玉機能の1つである全文検索を扱います。最終回にふさわしく、内容も高度なものになっていますが、ここまでおつきあいいただいた読者の皆さまであれば、十分に理解できる内容だと思います。 SKIPにおける全文検索機能では、任意の検索キーワード
Hyperestraier のセットアップ。 拙いながらスクリプトも書いてみました。 #!/bin/bash mkdir /var/hyperestraier useradd -d /var/hyperestraier -s /sbin/nologin estraier chown estraier:estraier /var/hyperestraier -R sudo -u estraier estmaster init /var/hyperestraier こんなのスクリプトにするまでもないね。 まあ作業ログってことで。 さらに、/etc/init.d/ に、置くノードサーバーの起動スクリプト。 hyperestraierをソースからインストールした場合、これが最初からは入ってないのでちょっと不便。 /etc/ini.d/hyperestraier start とかで起動できるよう
railsでhyperestraierを使うacts_as_searchableを最近弄ってるのでメモ。 インストールとかは省略。こちらが参考になるかも。*1 ドキュメントはここに関数の一覧がある。 そして、検索方法なんかはhyperestraierのユーザーガイド参照する。 複雑な条件式とかできないのかーって色々調べた結果、結構複雑な条件式が使える事がわかったのでメモ。 基本形としてはmodelの定義に acts_as_searchable :attributes => { :title => nil, :blog => :blog_title }, :searchable_fields => [ :title, :body ] と書くとドキュメントにあるけど、基本的に全文検索の必要があるカラムをsearchable_fieldsに設定して、 併せて条件を書くカラムを:attribute
GT Nitro: Car Game Drag Raceは、典型的なカーゲームではありません。これはスピード、パワー、スキル全開のカーレースゲームです。ブレーキは忘れて、これはドラッグレース、ベイビー！古典的なクラシックから未来的なビーストまで、最もクールで速い車とカーレースできます。スティックシフトをマスターし、ニトロを賢く使って競争を打ち破る必要があります。このカーレースゲームはそのリアルな物理学と素晴らしいグラフィックスであなたの心を爆発させます。これまでプレイしたことのないようなものです。 GT Nitroは、リフレックスとタイミングを試すカーレースゲームです。正しい瞬間にギアをシフトし、ガスを思い切り踏む必要があります。また、大物たちと競いつつ、車のチューニングとアップグレードも行わなければなりません。世界中で最高のドライバーと車とカーレースに挑むことになり、ドラッグレースの王冠
Archives 2008年 5月 2008年 4月 2008年 3月 Category Amazon (2) Tips (7) Web API (1) Webサイト (1) エディタ (1) オープンソース (1) プラグイン (6) ホスティング/サーバ (1) 開発 (6) Meta ログイン RSS コメント RSS Valid XHTML XFN WP リンク MOONGIFT Open Service Cool Coding MOONGIFTブログ Resident of Net Rails2.0からページネーションがプラグインベースになりました。普通のページネーションであれば、 @memos = @user.memos.paginate(:page => params[:page], :per_page => 10, :order=>”memos.id D
業務でHyperEstraierを使ったサンプルファイルを実行する事になったため、その手順を記載しておく。 事前準備 Hyper Estraierをインストールする前に以下をインストールしておく ※以下をインストールしてなくてもHyper Estraierのconfigureは通ってしまって(エラーがでない)、なぜインストールできないのか、しばらく考えてしまった。。 ・libiconv http://ftp.yz.yamagata-u.ac.jp/pub/GNU/libiconv/ ・QDBM http://qdbm.sourceforge.net/ ・ZLIB http://zlib.net/ zlib # wget http://www.zlib.net/zlib-1.2.3.tar.gz # tar zxvf zlib-1.2.3.tar.gz # cd zlib-1.2.3 # l
HyperEstraierをMacにインストールする方法については「Mac OS X に Hyper Estraier をインストールする - METAREAL」に詳しい説明が載っています。 しかしMETAREALで紹介されている方法では、HyperEstraierはN-gram方式でしかインデックスしてくれません。HyperEstraierにN-gramと形態素解析を併用させるには、以下のようにMeCabとの連携を行うように設定する必要があります。 以下、MeCabとHyperEstraierのインストールから、HyperEstraierの動作確認までをまとめておきます。 MeCabのインストール MeCab本体のインストール http://mecab.sourceforge.net/より mecab-0.97.tar.gz をダウンロードします。
acts_as_searchable は、 HyperEstraier を使って簡単に全文検索を行うことができる、 非常に便利なRailsプラグインです。 しかし、HyperEstraierが提供する類似検索機能を使うインターフェイスが 用意されていないようだったので、類似検索機能を付け足しました。 acts_as_searchable_with_similarity オリジナルの acts_as_searchable に対する差分はこちらにあります。 with_similarity.diff 使い方 まずは、オリジナルと同様に検索対象のモデルに acts_as_searchableを書き加えます。 必要に応じて適切なオプションを指定してください。 app/models/article.rb
一定期間更新がないため広告を表示しています
mixiでも使われているって言う全文検索エンジンHyperEstraier。mixiの膨大な件数を処理するぐらいだから相当スケーラビリティもあるだろなーとおもいつつ、SQLだけで全文検索できちゃうMySQL+Sennaが便利なんで、そっちばっかり使ってました。 MySQL+Senna(Triton)も、PostgreSQL+Senna(Ludia)も、属性付きで検索した場合、Sennaで全文検索してから、その答えをSQLで絞り込みを行っているようで、たとえば、個人のメッセージを保存しているテーブルを検索した場合など、属性の値が多い場合には、かなり効率が悪くなる事が見えてました。 本当は、メッセージみたいなものは、個人ごとにインデックスをもって処理するべきなんだろうなと思っていて、SennaでやるかHyperEstraierでやるか迷いつつ、ぐぐっていたところ、HyperEstraierがど
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
