ｶｽﾀﾏｲｽﾞ - Senna 組み込み型全文検索ｴﾝｼﾞﾝ

ｶｽﾀﾏｲｽﾞ - Senna 組み込み型全文検索ｴﾝｼﾞﾝLogin

設定ﾌｧｲﾙ(senna.conf)についてDEFAULT_ENCODINGN-gramのみの利用であればMeCabのｲﾝｽﾄｰﾙは不要NFKCを用いた文字列正規化の抑制Linux AIO/DIOを用いたﾕｰｻﾞﾚﾍﾞﾙｷｬｯｼｭの利用ﾕｰｻﾞﾚﾍﾞﾙｷｬｯｼｭの注意点ﾕｰｻﾞﾚﾍﾞﾙｷｬｯｼｭの導入方法ｿｰｽｺｰﾄﾞ内で調整できるﾊﾟﾗﾒｰﾀSenna 本体MySQL ﾊﾞｲﾝﾃﾞｨﾝｸﾞ

ｶｽﾀﾏｲｽﾞ

設定ﾌｧｲﾙ(senna.conf)について

通常､/var/senna/senna.conf(Windowsではc:\senna\senna.conf)がSennaの設定ﾌｧｲﾙとなります｡設定ﾌｧｲﾙは､基本的に設定したいﾊﾟﾗﾒｰﾀ名半角ｽﾍﾟｰｽ設定値改行という形式が連なったﾌｧｲﾙです｡必要のある項目だけ修正ください｡一般的な利用では､INITIAL_N_SEGMENTSを変更する必要はありません｡

DEFAULT_ENCODING

DEFAULT_ENCODING 文字ｺｰﾄﾞSennaが処理対象とする文字列の文字ｺｰﾄﾞを指定します｡ euc, sjis, utf8のいずれかの値を指定してください｡ﾃﾞﾌｫﾙﾄはeucです｡ MeCabの辞書ﾌｧｲﾙの文字ｺｰﾄﾞ (MySQLﾊﾞｲﾝﾃﾞｨﾝｸﾞを利用する場合には､ｲﾝﾃﾞｯｸｽ対象のｶﾗﾑの文字ｺｰﾄﾞも)を上記で指定したｺｰﾄﾞに合わせてください｡

N-gramのみの利用であればMeCabのｲﾝｽﾄｰﾙは不要

N-gramのみを用いる予定であれば､MeCabは必要ありません｡以下のようにconfigureを実行すれば､MeCabに依存しないSennaをmakeできます｡ > ./confiure --without-mecab

NFKCを用いた文字列正規化の抑制

nfkc.cは､ICUが行う正規化相当の正規化を行うｿｰｽです｡現段階では､UTF-8の正規化の場合のみ用います｡このｿｰｽはRubyで自動生成されており､大変ｺﾝﾊﾟｲﾙ負荷がかかります｡よって､一部環境ではｺﾝﾊﾟｲﾙが完了しないといった現象が起こります｡ NFKCによる正規化が必要ない場合には､以下のようにconfigureを行ってNFKCを無効にしてください｡ > ./confiure --disable-nfkc

Linux AIO/DIOを用いたﾕｰｻﾞﾚﾍﾞﾙｷｬｯｼｭの利用

Linux 2.6以降では､ｶｰﾈﾙのﾊﾞｯﾌｧｷｬｯｼｭを経由せずにﾌｧｲﾙに非同期ｱｸｾｽを行える AIO/DIOという機構が備わっています｡この機構を用いて､ VA Linux Systems Japan の北目さんがSennaのﾕｰｻﾞﾚﾍﾞﾙｷｬｯｼｭ機能を実装しました｡低ﾒﾓﾘ消費で高効率なｷｬｯｼｭなので､ﾒﾓﾘ資源の制約がｼﾋﾞｱな環境で高い性能が要求される局面で効果が期待できます｡

ﾕｰｻﾞﾚﾍﾞﾙｷｬｯｼｭの注意点

Linux 2.6以降専用です｡動作の安定性については未確認です｡rev.130現在では､glib 2.8以上が必要です｡

ﾕｰｻﾞﾚﾍﾞﾙｷｬｯｼｭの導入方法

configure時にaioの使用を指定> ./configure --enable-aio起動時に環境変数 SEN_AIO_ENABLED に 1 を指定以上の設定を行ったあとにSennaを利用ください｡

ｿｰｽｺｰﾄﾞ内で調整できるﾊﾟﾗﾒｰﾀ

ｿｰｽｺｰﾄﾞに直接手を入れることによってのみ設定可能なﾊﾟﾗﾒｰﾀが存在します｡

Senna 本体

ﾊﾟﾗﾒｰﾀ名ｿｰｽｺｰﾄﾞﾃﾞﾌｫﾙﾄ値詳細SEN_LEX_NGRAM_UNIT_SIZEsenna.h2N-gramのNの数

MySQL ﾊﾞｲﾝﾃﾞｨﾝｸﾞ

ﾊﾟﾗﾒｰﾀ名ｿｰｽｺｰﾄﾞﾃﾞﾌｫﾙﾄ値詳細SENNA_MAX_N_EXPRmyisam/ft_boolean_search.c32boolean modeで指定できる式の最大数Last modified: 2006-09-15 ﾗﾝﾄﾞｾﾙ

■Next Page

･Full Browser

ja.abc-yoga.podzone.org | Contact

Contents