タグ: Hadoop

Hadoopに関するタグです。

  • 【ビッグデータ】FacebookのHadoop Corona

    【ビッグデータ】FacebookのHadoop Corona

    Facebookは毎日0.5ペタバイト増加するデータにHadoop MapReduceのスケーラビリティに限界を感じた。
    そこで出てきたのがCorona。Githubにもあるよ。
    “Facebook、Hadoopのスケーラビリティ問題を解決する、独自の「Hadoop Corona」をオープンソースで公開 - Publickey”
    http://www.publickey1.jp/blog/12/facebookhadoophadoop_corona.html

  • 【ビッグデータ】象使いは笛をふく

    【ビッグデータ】象使いは笛をふく

    象使いは笛をふく。
    どうやら白い方が勝つわけではないらしい

    ビッグ・データを操る者が勝つ
    http://www.ism.ac.jp/news/2012/120116.html

    象使い=Mahout

  • 【ビッグデータ】Apache Hadoop WebHDFS REST APIはJSON 形式

    【ビッグデータ】Apache Hadoop WebHDFS REST APIはJSON 形式

    昨年12月27日にApache Hadoop 1.0.0がリリース。
    気になるのがWeb HDFS REST API。
    HDFSデータを JSON 形式で取得できること。
    #hadoop
    #13日の金曜日

    13日の金曜日ネタ。

    Apache Hadoop が1.0.0になったみたい。2012年はビッグデータが一般大衆に浸透する年になるのかな。
    Web HDFS REST APIが気になる。大量のデータを必要な分だけ利用する。
    ビッグデータをどう活用するかが大事だと思う。

  • ビッグデータをスモールプラクティスにしてしまうのはもったいない

    ビッグデータをスモールプラクティスにしてしまうのはもったいない

    ビッグデータを処理し、抽出された結果を可視化する。
    その後の可視化された結果からのアクションは人間が判断すべきと思う。
    ビッグデータをスモールプラクティスにしてしまうのはもったいない。
    #ビッグデータ

    情報マネージャとSEのための「今週の1冊」(70):分析するのは「ツール」ではなく「人」である – ITmedia エンタープライズ
    http://www.itmedia.co.jp/im/articles/1111/29/news119.html

    ビッグデータから見えた何かを次のアクションに持っていく。その次のアクションは人間が決めるもの。
    機械に選択された道筋は、舗装された道路かもしれないけど、未開発の多少転びそうな野道のほうが面白いと思う。
    大事なところは人間が決めるべき。

    基本的に、「最後は人間だよね」と言っておけばハズレはないという法則(笑)。

  • うらじゃ鍋とうらじゃまん!?

    うらじゃ鍋とうらじゃまん!?

    【今日のはてブ】

    うらじゃ鍋とうらじゃまんだって!?
    うらじゃ鍋とうらじゃまん。岡山といえば「うらじゃ」ていうのが浸透してきたのかも。岡山がんばれ。

    【岡山】「北」にうまいものあり!晴れの国おかやま [ご当地グルメ・名所の旅] All About
    http://allabout.co.jp/gm/gc/386613

    犯人はヤス。

    [Androidのマスコット「ドロイドくん」本物とニセモノの見分け方 – GIGAZINE]
    http://jukepage.com/urlmeta/gigazine.net/7617/1

    コレはかわいい!

    Androidのドロイドくんを改造した200枚以上のイラスト集「Droidarmy」 – GIGAZINE
    http://gigazine.net/news/20110727_droidarmy/

    地球って素晴らしい
    カラパイアには、美しい画像がいっぱい。このサイト好きです。

    奇跡のシャッターチャンス、2011年風景写真コンテスト受賞作品:カラパイア
    http://karapaia.livedoor.biz/archives/52047802.html

    デキる男のカッコいい論破。J.P.モルガンいけめんすぐる。

    金持ちと結婚したいの女へのJ.P.モルガン社長の返答が凄いwww │ キニ速  気になる速報
    http://blog.livedoor.jp/kinisoku/archives/3137678.html

    こいつぁ、気になる。
    Hadoopはファイルの更新っていうか上書きができればなあ。

    NTTデータが「Hadoop」戦略の最新動向を米国で披露–富士通とストレージシステム共同開発 – CNET Japan
    http://japan.cnet.com/news/business/35010354/

  • 【ビッグデータ】hiveでひでぶ

    【ビッグデータ】hiveでひでぶ

    hiveでひでぶ。
    hqlに一連の作業を記述すべきだけど、トランザクションがないので落ちたときの復旧がめんどくさい。
    テーブル作成や削除はHDFS データを残すか残さないかで悩みどころ。
    m&rに比べてテーブル結合は便利だけどちょい使いにくい。
    管理専用にして閲覧だけでいいのじゃないかと
    (さらに…)

  • 【ビッグデータ】Hadoop はデータの更新がしにくい

    【ビッグデータ】Hadoop はデータの更新がしにくい

    Hadoop はスケールアウトでの性能アップは見込めるけどビッグデータ以外なら普通に処理した方がいい。
    ほとんどの企業には向いていない。データの更新がしにくいのがたまに傷。

    TwitterやFacebookで使われている「Apache Hadoop」のメリットや歴史を作者自らが語る – GIGAZINE
    http://gigazine.net/news/20110902_apache_hadoop/

    Hadoopを触る機会が増えてきたんだけど、大量のデータを一気に捌いてくれるのは嬉しいんだけど、
    一度作成したデータを再利用したりするのには不向き。

    (さらに…)

  • 【ビッグデータ】黄色いゾウさん

    【ビッグデータ】黄色いゾウさん

    昨日は、黄色いゾウさんが1頭たった。

    その後、黄色いゾウさんたちが1つの世界で同時に立ち上がった。
    たくさんの世界で黄色いゾウさんが一斉に立ち上がるのは舞台が整ってから。
    あまり仕事のことはかけないけど、わりと先端の技術を使ってます。
    自分のペットのような黄色い子供のゾウさん。たくさん育てたい。
    ただ、自分の庭から出すのはまだ少し先のことだ。 
    Apache™ Hadoop™! http://hadoop.apache.org/

    (さらに…)