可愛いです． でも，喰いました．

全開，Sparkをビルドから挑戦してハマったので．．． Sparkのインストールにハマる[1] - なぜか数学者にはワイン好きが多い Sparkのインストールにハマる[2] - なぜか数学者にはワイン好きが多い今度はCDH用にビルド済みのものを使って手抜きをしようと思い…

FreeBSDマシンの他に5台ほどのWindowsマシンを使っていますが， Windows 7の一台だけ，1つの更新プログラムに問題があって適用できていませんでした． こんな感じに，一つだけ残してありました． この更新プログラムをインストールすると，確率1でエクスプロ…

http://cr.maxim-s.co.jp/roti/「欲張りディナー」が良かったです． 渋谷ヒカリエ/Shibuya Hikarie内容はこんな感じです． 前菜: 海の幸のゼリー寄せ 香華風味 パン: パン盛り合わせ お肉料理: 仔羊背肉ローストマスタードソース デザート: マンゴープリン …

まだハマりどころがありました． Apache Hiveにハマり続けている毎日 - なぜか数学者にはワイン好きが多い HadoopはCDH5をAmazon EC2上に構築しています． データノードはm3.2xlargeを使っていたのですが，ただのSELECTにパーティション以外のカラムにWHERE…

ちょっとぶりに行ってきました． ムーミンベーカリー＆カフェ - なぜか数学者にはワイン好きが多い ムーミンカフェ - なぜか数学者にはワイン好きが多いこちらは，「北欧のオードブル」．カマンベールチーズに目が付いていて，ニョロニョロを醸し出している…

私自身はHiveなんていらないんですよ．．．テキストファイルを自前でパースして集計したり統計取ったり，データを学習させるのが仕事なんですが，自分でプログラム組んだ方が早いので． でも，どうしてもSQLライクなアクセス方法は，会社では捨てられないで…

美味しいです．まず，薄くてサクサクしてます．次に，オニオン風味の甘みが強くて，その中に塩味が混ざってて良い感じです．原材料名は，【じゃがいも（遺伝子組換えでない）」，「デキストリン」，「食塩」，「砂糖」，「酵母エキスパウダー」，「乳清たん…

ソソられますねー．．．数日，気になって仕方がなかったです．時間がなくてまだ触れていません． Norikra v1.0.0 - たごもりすメモ ストリーミングデータ処理と騒ぎ始めて，はや2年． Streaming Processing for Big Data - なぜか数学者にはワイン好きが多い…

久しぶりですに行ってきました．ITALIAN BAR＆GRILL VENTO - なぜか数学者にはワイン好きが多い ITALIAN BAR＆GRILL VENTO パスタ編 - なぜか数学者にはワイン好きが多い ITALIAN BAR＆GRILL VENTO 蟹パスタ編 - なぜか数学者にはワイン好きが多い 2009年か…

MapReduceはキー・バリューで処理するので，キーのIDを最終的にLook up tableなんかを引いて，IDから何らかの意味のある値なり文字列にして出力したいことがよくあります．ただ，分散処理されちゃうので，LUTはHBaseなりCassandraに置くとかが普通な感じです…

これはかなり美味しいです．しょうゆ味ですが，ホタテの潮騒味もして，そしてバターの香りと良い感じです．原材料名は，「デキストリン」，「たんぱく加水分解物（大豆・鶏肉・豚肉を含む）」，「ホタテエキスパウダー」，「砂糖」，「酵母エキスパウダー」…

YARNのクライアントモードで実行が確認できたなら， [解決確認] Sparkのインストールにハマる[6] - なぜか数学者にはワイン好きが多い スタンドアロンモードも確認したいです．ローカルモードはどうでもいいです． $ export HADOOP_CONF_DIR=/usr/local/hado…

とりあえず，サンプルプログラムくらい動かさないと，構築できたかどうか分かりません．モンテカルロ法の円周率の計算をいきましょう．Hadoopで言う，hadoop-examplesのpiですね． 実行． export HADOOP_CONF_DIR=/usr/local/hadoop/etc/hadoop;export SPARK…

結構いいところまでいったのに， Sparkのインストールにハマる[2] - なぜか数学者にはワイン好きが多い そこから強引に走ったのが間違いでした．私らしくない．たった一行のエラーなので，訂正できないかと調べてみました．ググると神の声が． Apache Spark …

プリコンパイル済みの最新版を入れてみました． $ wget http://people.apache.org/~pwendell/spark-1.0.0-rc3/spark-1.0.0-bin-hadoop2.tgz $ tar xf spark-1.0.0-bin-hadoop2.tgz $ chown -R spark:spark spark-1.0.0-bin-hadoop2 $ ln -sv spark-1.0.0-bin…

無理やりインストールしてあるバージョンのCDHとは違うバージョンを指定してみました． $ time SPARK_HADOOP_VERSION=2.3.0-cdh5.0.0 SPARK_YARN=true sbt/sbt assembly Launching sbt from sbt/sbt-launch-0.12.4.jar [info] Loading project definition fr…

よく考えたら，Hadoop関係以外は取れているんだから，プロクシは効いているはず．sbt-launch-0.12.4.jar自体もダウンロードできていますし． ひょっとしたらhttpsアクセスが失敗しているのじゃないかと思って，Clouderaのレポジトリをhttpsじゃなくてhttpで…

MahoutがHadoopを捨てSparkベースに Apache Mahout 25 April 2014 - Goodbye MapReduce The Mahout community decided to move its codebase onto modern data processing systems that offer a richer programming model and more efficient execution than…

じわっとした辛さです．辛味レベル2だそうなので，あまり辛くないレベルだそうです． 酒のツマミには良いですが，飲み物や他のおやつ無しに，これだけ食べてると結構辛く感じてきそうです．原材料名は，「じゃがいも（遺伝子組換えでない）」，「デキストリ…

シークワーサーの香りがいいですね．塩味ベースなんですが，ほんのりと甘さを感じるところも美味しいです．原材料名は，「じゃがいも（遺伝子組換えでない）」，「デキストリン」，「砂糖」，「食塩」，「粉末しょうゆ（小麦・大豆を含む）」，「かつおぶし…

次のパターンを試しました． 非圧縮通常ファイルサイズ 557メガバイトの，Cloudera社hadoop-2.3.0-CDH5.0.0です gzip圧縮済み元ファイル通常ファイルサイズ 225メガバイトの，Cloudera社hadoop-2.3.0-CDH5.0.0のgzip圧縮ファイルです xz圧縮済み元ファイル通…

まずはSqoopから置きます．プロンプトが#はroot，$は一般ユーザです． # tar xf sqoop-1.4.3-cdh4.5.0.tar.gz -C /usr/local/ # chown -R hadoop:hadoop /usr/local/sqoop-1.4.3-cdh4.5.0/ # ln -s /usr/local/sqoop-1.4.3-cdh4.5.0 /usr/local/sqoop # emac…

なんとも表現しがたいですけど，甘辛くて美味しいですね．もちろん，味は濃すぎないです． なかなか良い感じです．原材料名は，「脱脂大豆（遺伝子組換えでない）」，「コーングリッツ（遺伝子組換えでない）」，「ライスグリッツ」，「粉末しょうゆ（小麦を…