@johtaniの日記 3rd

@johtani's blog 3rd edition

Cloudera World Tokyo 2013に参加しました！ #cwt2013

Cloudera World Tokyo 2013に参加してきました。午前中はあいにくの雨でしたが、それでも結構な人数が最初の基調講演から参加されてました。私が参加したセッションは大盛況な感じでした。

2013-11-07 by johtani

Riak Meetup #3 #riakjp に参加しました。

またまた、Riak Meetup Tokyo #3に参加してきました。Riak2.0のYokozunaの話があると聞いたので。ということで、いつものように個人メモです。今日は自重して、懇親会はアルコールなしにしました。思いがけずfluentd＋elasticsearch+kibanaという組み合わせの話も聞けて大満足です。 Yokozunaのデモが見れなかったのがちょっと残念だったかなぁ。

2013-11-06 by johtani

elasticsearch-extended-analyzeの改良

開発中ですと書きました、elasticsearch-extended-analyzeですが、改良しました。改良と変更は以下のとおりです。ソースのパッケージをorg.elasticsearchからinfo.johtaniに。MLで気になったので質問したら、変えたほうがいいよとのこと。ダウンロード化については、もう少々お待ちを。出力形式を変更。可能な限りCharFilter、Tokenizer、TokenFilterそれぞれが出力する内容を返すようにしました。ただし、既存のAnalyzer（JapaneseAnalyzerクラスとか）に関しては、現時点では出力しません。CharFilterなどを取得するI/Fが見えないためです。（改良できるかの調査は未着手）現時点でできてないのは以下の項目

2013-11-04 by johtani

elasticsearch-extended-analyzeプラグインを開発中

お久しぶりです。気づいたらまた、結構ブログを書いてなかったです。。。今回は、今開発しているElasticsearchのプラグインに関するお話です。

2013-10-25 by johtani

第12回Solr勉強会を主催しました。#SolrJP

不定期開催ですが第12回Solr勉強会を主催しました。今回は、前回ほどの過熱ぶりでは無かったですが、70人ほどの参加者の方がいらっしゃったかと。ありがとうございます！今回は聞きたかったYokozunaの話をしてもらいました。あと、リベンジManifoldCF。一部、追記しました。Bashoさんからツッコミがあったので。あと、4.5.1の話とか。

2013-10-10 by johtani

elasticsearch-inquisitorプラグインの紹介

今日は、ElasticSearchのMLで見つけたelasticsearch-inquisitorプラグインの紹介です。 ElasticSearchはREST API形式で簡単にコマンドラインからいろいろな処理を実行できて便利ですが、 GUIがあったほうが楽なこともまた事実です。今回紹介する、inquisitorプラグインもSiteプラグイン（Webブラウザでアクセスできるプラグイン）の1つです。（ただし、ローカルにインストールしてローカルのElasticSearchにしか接続できませんが。。。）

2013-09-23 by johtani

elasticsearch-river-wikipediaの疑問点

river-wikipediaの前々回の記事で書きましたが、bulk_sizeに関連して登録件数がやけにきりが良いのが気になると書いていました。で、Riverの仕組みを勉强がてら、elasticsearch-river-wikipediaのソース（1.2.0）を読んでみました。 Riverの作り Riverはorg.elasticsearch.river.Riverというinterfaceを実装することで作らています。ただ、Riverがinterfaceとなっていますが、o.e.river.AbstractRiverComponentというクラスを継承して作られています。

2013-09-12 by johtani

日本語Wikipediaをインデクシング（Kuromojiバージョン）

前々回紹介した、日本語Wikipediaのデータをインデックス登録する記事の続きです。今回は、Kuromojiのアナライザを利用してインデックス登録してみます。余談（Proxy環境でのプラグインインストール） ElasticSearchのpluginコマンドはJavaで実装されています。（org.elasticsearch.plugins.PluginManager）プラグインのダウンロードには、java.net.URL.openConnection()から取得URLConnectionを使用しています。

2013-09-03 by johtani

第1回ElasticSearch勉強会を開催しました！ #elasticsearchjp

ElasticSearch勉強会第1回を主催しました。昨年のpyfesでなんちゃって資料で喋って、1年たちました。 ElasticSearchの書籍（英語）も出てきて、今年はElasticSearchが面白くなりそうだし、使ってる人たちから話も聞きたいなぁということで、主催しました。

2013-08-30 by johtani

ElasticSearchにプラグインで日本語Wikipediaデータを入れてみました

久々のブログはElasticSearchネタです。勉強会開催する予定だったりすので、もう少し触っておきたいなと。お手軽に検索するデータとして、よくWikipediaのデータを使っています。 ElasticSearchにはelasticsearch-river-wikipediaという便利なプラグインがあり、Wikipediaのデータを簡単に検索可能な状態にできます。このRiverを利用して日本語のWikipediaのデータを入れたので、メモを取っておきます。まずは、river-wikipediaで日本語のデータをインデクシングしてみるまでの説明です。日本語特有の設定（Kuromojiを利用したインデクシング）などはまた後日。

2013-08-23 by johtani