arison.jp blog

タグ: BigData

巨大で複雑なデータ集合体のこと。データの収集、取捨選択、保管、検索、共有、転送、解析、可視化を行い、
大規模データの集合の傾向をつかむことで、ビジネスの傾向の発見、研究の品質決定、疾病予防などに活用を行う。
ありブログでは主に、bigdataはHadoopを用いた記事のタグに使用します。

  • 【ビッグデータ】データレイクとデータウェアハウスとデータマートの違いのたとえ

    【ビッグデータ】データレイクとデータウェアハウスとデータマートの違いのたとえ

    データレイク(データの湖)からデータ(魚)をとって、
    データウェアハウス(データの倉庫)へ加工して商品を置いて、
    データマート(データのお店)で販売するってことか。

    上記のつぶやきは、データレイクとデータウェアハウスとデータマートをデータを魚にあてはめてまとめたつぶやき。
    最近になってデータレイクという言葉を聴くようになった。
    それぞれが似ているようなものなんだけど、少しずつ役割が違う。
    役割が違うから別の言葉として誕生しているわけだけど。
    (さらに…)

  • イオンのプロと呼ばれる専業主婦はビッグデータ活用人間だった

    イオンのプロと呼ばれる専業主婦はビッグデータ活用人間だった

    専業主婦の方が下手すると男性よりも難しい知識と技術を駆使して日夜戦場で戦っている。
    イオンのプロと呼ばれる専業主婦はビッグデータ活用人間だった。

    イオンのプロと呼ばれる専業主婦は入荷情報。そのタイミング。夜間に届いている商品の数。
    陳列のタイミング。果ては買い物カートの整理のタイミングはどのような時にあるのか。
    を全て把握していた。

    専業主婦は偉大です。

    イオンのプロ…主婦の立ち話に耳を奪われた話 – Amazonの悪魔
    http://konozama.jp/amazon_devil/2013/09/post-321.html

  • MySQL Cluster の性能限界を知った

    MySQL Cluster の性能限界を知った

    MySQL Cluster の性能限界を知った。
    SQLノードのコネクション(ホスト数)最大255の壁にぶつかった。
    SQLノードまでがコネクションプーリングなら問題ないけど、毎回コネクション貼っている場合、コネクションが不足する。
    不足すると待ちが発生し性能が極端に劣化する。

  • 震災ビッグデータ

    震災ビッグデータ

    携帯電話の位置情報から知る震災ビッグデータ。
    避難した人よりも浸水域に入った人のほうが多い事実。
    助けにいった人が被災している。
    自分も家族がいたらそうしていたと思う。
    (さらに…)

  • 【ビッグデータ】FacebookのHadoop Corona

    【ビッグデータ】FacebookのHadoop Corona

    Facebookは毎日0.5ペタバイト増加するデータにHadoop MapReduceのスケーラビリティに限界を感じた。
    そこで出てきたのがCorona。Githubにもあるよ。
    “Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開 － Publickey”
    http://www.publickey1.jp/blog/12/facebookhadoophadoop_corona.html

  • 【ビッグデータ】データ活用基盤サービス[富士通]

    【ビッグデータ】データ活用基盤サービス[富士通]


    乗るしかない このビッグデータに！


    乗るしかない このビッグデータに！ むしろ載せるしかない このデータ活用基盤サービスに！
    (さらに…)

  • 情報LIVEただいま

    情報LIVEただいま

    『情報LIVEただいま』4月27日の22時からNHKで、富士通のPHRの取り組みが放送されます。
    自分が従事している富士通のデータ活用基盤サービスが紹介されます。
    ビッグデータというフレーズに敏感な人は要チェック。#hadoop

  • 【ビッグデータ】ライフサイクルデータとしてのパスモ

    【ビッグデータ】ライフサイクルデータとしてのパスモ

    ライフサイクルデータとしてパスモの乗車履歴が使われているのはビッグデータ扱っていたら有名な話。
    データセットがほしい。

    高木浩光＠自宅の日記 – パスモは乗車履歴を第三者提供？ 他社のビッグデータに取り込まれる可能性
    http://takagi-hiromitsu.jp/diary/20120227.html#p01

  • 【ビッグデータ】データ活用基盤サービス

    【ビッグデータ】データ活用基盤サービス

    「データ活用基盤サービス」ビッグデータでビッグマネーを手にいれることはできるのか!?

    ビッグデータ利活用のためのクラウドサービス「データ活用基盤サービス」を提供開始 : 富士通
    http://pr.fujitsu.com/jp/news/2012/01/16.html?nw=pr

  • ビッグデータをスモールプラクティスにしてしまうのはもったいない

    ビッグデータをスモールプラクティスにしてしまうのはもったいない

    ビッグデータを処理し、抽出された結果を可視化する。
    その後の可視化された結果からのアクションは人間が判断すべきと思う。
    ビッグデータをスモールプラクティスにしてしまうのはもったいない。
    #ビッグデータ

    情報マネージャとSEのための「今週の1冊」（70）：分析するのは「ツール」ではなく「人」である – ITmedia エンタープライズ
    http://www.itmedia.co.jp/im/articles/1111/29/news119.html

    ビッグデータから見えた何かを次のアクションに持っていく。その次のアクションは人間が決めるもの。
    機械に選択された道筋は、舗装された道路かもしれないけど、未開発の多少転びそうな野道のほうが面白いと思う。
    大事なところは人間が決めるべき。

    基本的に、「最後は人間だよね」と言っておけばハズレはないという法則（笑）。