Hadoop / RabbitMQ

前編、中編に続いて『Hadoop&RabbitMQを利用したTwitter全量リアルタイム解析』(2012/12/10 Hadoopエンタープライズソリューションセミナー)レポートの最終回です。

前編ではBuzzFinderサービス＆日本語解析技術について、 中編ではデータ処理フローについてご紹介しましたが、 今回はBuzzFinderでの解析例をご紹介します。

8. Twitter分析結果

8.1 「地震」のツイート数

今回の講演では「地震」を例に分析を行いました。 グラフを見ると地震発生日などにつぶやきが増えています。

スライド

8.2 関連語分析

こちらは関連語分析の結果です。 身近で実際に地震が起きると感情表現が増えています。

スライド

8.3 評判分析

評判分析を行うと首都圏の地震発生時に最もネガティブとなっています。

スライド

8.4 地域分析

地域分析では震源地のツイートが多いという(自然な)結果が出ています。

スライド

8.5 性別分析

性別の分布を見てみると、実際の地震では女性率が上がるようです。

スライド

8.6 年齢分析

年齢面では実際の地震の場合に若年層の割合が増えています。

スライド

8.7 職業分析

職業を見ると、実際の地震で学生が増えています。 こちらはやはり若年層と同様の傾向となっています。

スライド

9. まとめ

今回の連載ではBuzzFinderというサービスにおける

  • リッチインデクシング技術による日本語解析
  • HadoopとRabbitMQを使ったデータ処理フロー
  • 「地震」についての解析例

をご紹介しました。 こちらの内容がデータ処理を行う参考になれば幸いです。

また、データ処理に関するプロジェクトをどんどんやっていきたいと思っていますので ご協力できそうな話がありましたらお声掛けください。

バックナンバー