Groonga導入事例−地域コミュニティサイトLOHABUU
•
1 gostou•1,737 visualizações
地域コミュニティサービス「LOHABUU」におけるGroongaの導入事例
Recomendados
Mais conteúdo relacionado
Destaque
Destaque (12)
Semelhante a Groonga導入事例−地域コミュニティサイトLOHABUU
Semelhante a Groonga導入事例−地域コミュニティサイトLOHABUU (20)
Groonga導入事例−地域コミュニティサイトLOHABUU
- 2. ⾃自⼰己紹介 • 紀國 聡（きのくにさとし） • 株式会社アンタス ITソリューション部部⻑⾧長 • ITシステム企画設計 • ビジネスIT活⽤用⽀支援 • 札幌オオドオリ⼤大学 ドリ農部部⻑⾧長 • 農作業を通した⼈人材交流流 • 街の⼋八百屋紹介フリーペー パー制作
- 4. LOHABUU!!（ろはぶー） • ”local”と”hub”を合わせた造語。 地域の⼈人や情報をつなぐハブとな るサービスになるよう命名。 • みんなのブログやつぶやきをリア ルタイムに集めて表⽰示。 • いま何が盛り上がっているかがわ かる。 • その時の気持ちが共有できる。 • 特定のキーワード毎にまとめて表 ⽰示するとより⾯面⽩白い。
- 6. つまり
- 8. あゆみ 2010年年10⽉月 開発スタート 2010年年12⽉月 稚内、別海オープン 2011年年 函館、⼩小樽、札幌 速度度チューニング 2012年年 ⼗十勝、釧路路、網⾛走、根室 位置情報対応
- 9. しくみ • Twitter、Youtube等のCGM コンテンツをAPIで取得 （毎分） ! • 取得したコンテンツをMySQL とGroongaに登録 ! • 任意の切切り⼝口（条件）で コンテンツを検索索して表⽰示
- 10. なやみ Rroonga ruby rails 3.0 refinay CMS 同じコンテンツを 保持 クロールコンテンツ 登録・CMSでの編集 インデクス 作成 全⽂文検索索でidのみ を取得Groongaで検索索したid を⽤用いてid指定検索索 id MySQLとGroongaのデータ⼆二重持ち
- 14. パフォーマンス⽐比較 MySQL mysql> select * from cgms -> where body like '%sapporo%' -> order by orig_updated_at desc limit 10; ・・・ 10 rows in set (49.15 sec) ! Rroonga > def search_sapporo > t_start = Time.now.instance_eval { self.to_i * 1000 + (usec/1000) } > cgms = ::GroongaSearchEngine.search('sapporo') > t_end = Time.now.instance_eval { self.to_i * 1000 + (usec/1000) } > puts t_end - t_start > end > search_sapporo 1055 (≒1.06sec) LOHABUU札幌のCGMテーブル （176万件）の検索速度比較
- 15. ハマったことなど Groongaでの検索索結果が必ずしも指定キーワードが含 まれていないことがあった。 → 仕⽅方ないので、検索索してから正規表現で マッチングした。 ! 表⽰示速度度チューニングのため、Groongaのインデック スを追加すると、検索索漏漏れなどが発⽣生した。 → 検索索に影響ない範囲でインデクスを削除
- 16. ハマったことなど Groongaに登録してインデクス作成しても、何故か 検索索されないケースがみられた。 → Groongaのキャッシュが原因？ → cache=noで検索索するようにすると、 検索索結果はよくなったが、ページ表⽰示時の CPU負荷が⾼高くなってしまった。。
- 17. ハマったことなど GroongaのDBは作成した時のパスを覚えてる！？ → テスト⽤用にファイルを移動・リネームすると 検索索結果が返ってこなくてハマった。 ! Rroongaのお作法に従う余裕がなかった。 → 意図した検索索結果の確認は直接Groongaを 叩いていたため、Rroongaに翻訳するよりも、 確認結果を⽂文字列列した⽅方が楽だった。
- 18. テーブル構造 Entry ! table_id : unsigned integer title : text body : text type : text orig_updated_at: time ・・・・ location :wgs84_geo_point ・・・ N-‐‑‒gram インデックス Geo インデックス Time インデックス
- 19. 補⾜足 利利⽤用例例や裏裏側など
- 20. 管理理画⾯面
- 21. 収集設定
- 23. 活⽤用事例例