MySQL＋Senna（tritonn）で1億レコードのテーブルを扱えない現象に悩まされています。

Question

osamuaa

8

8もっと見る

200pt

コンピュータ

MySQL＋Senna（tritonn）で1億レコードのテーブルを扱えない現象に悩まされています。

現在2000万PV/Dayのサイトを運営しておりますが、
1億レコードを保持するテーブルにてmatch～againstにて全文検索を行うと
該当ワードを含むレコードが存在していてもHitしないという現象が発生しております。

同規模のDBを扱った経験のある方、または情報をお持ちの方がいらっしゃいましたら
是非ともご意見頂きたいと思っております。

＜サーバ環境＞
OS：CentOS5.5
メモリ：16GB
Senna：MySQL5.0.67＋tritonn.1.0.12

よろしくお願い致します。

回答の条件

1人5回まで

登録：2011/11/30 11:30:44
終了：2011/12/07 11:35:03

※ 有料アンケート・ポイント付き質問機能は2023年2月28日に終了しました。

tdoi 2011/11/30 13:27:58

インデックスが壊れてるとかですかね。
check tableとかしたら、エラーとかでません？
osamuaa 2011/11/30 15:48:28

myisamchk -r やdropからのcreate indexなど試しましたが
特にエラーなどはなく、当該テーブル以外は問題なく動作しています。

また、Hitしない現象もある程度傾向があり、
検索ワード次第ですがある一定の日時以降のレコードがHitしないようです。
蓄積数の限界のような感じでしょうか・・・。

kodairabaseひどい。... - 人力検索での酷い回答URL集 - はてなハイク 2011-12-06 21:38:18

kodairabaseひどい。回答雑すぎる。 http://q.hatena.ne.jp/1323157804#a1121629 http://q.hatena.ne.jp/1322645579#a1120637 http://q.hatena.ne.jp/1322638890#a1120533 http://q.hatena.ne.jp/1322620243#a1121633

「あの人に答えてほしい」「この質問はあの人が答えられそう」というときに、回答リクエストを送ってみてましょう。

これ以上回答リクエストを送信することはできません。制限について

リクエスト送信済

回答リクエストを送信したユーザーはいません

kodairabase · Accepted Answer · 2011-12-06T17:40:09+09:00

No.1

kodairabase661802011/12/06 17:40:09

200pt

インデックスサイズまたは語彙数がオーバーフローしているのではありませんか？
実際には256G word未満で動かなくなることがあります。

既知の制限事項・不具合
http://qwik.jp/senna/knownproblems.html

ご回答ありがとうございます。

現在レコード数が約1億、ファイルサイズは30GB程度となっております。
気になるポイントは語彙数ですね・・・1レコードを複数に分割すると仮定すれば
あっという間に制限値を超えてしまいます（＝＝
おそらくこれが原因でしょうか・・・。

公式の制限事項ページは完全に見落としておりました。
ありがとうございました！

2011/12/07 10:10:30

MySQL＋Senna（tritonn）で1億レコードのテーブルを扱えない現象に悩まされています。

ベストアンサー

kodairabase661802011/12/06 17:40:09

コメント（2件)

この質問への反応（ブックマークコメント）

トラックバック