三度の飯とエレクトロン

Apache Sparkは、HDFS、Cassandra、HBase、S3など、様々なデータソースを元に分析を実行することができます。 CassandraのデータをApache Sparkで分析したい 以前、Cassandraについてブログを書きました。Cassandra Java Driverを使 ... Read More »

「クラスタマネージャーApache Mesosを使って、Amazon EC2にクラスタを構築。」で構築したクラスタを使って、Sparkの分散処理を実行してみます。 Apache SparkをAmazon EC2にインスール 今回は、SparkをAmazon EC2のインスタンスにインスールしていきま ... Read More »

前回は、「Intel Edisonの上にWebサーバを起動する。」で、EdisonをWebサーバとして使う方法を書きました。 今回は、やっとテスターが登場して電子工作っぽくなります。 Intel Edisonのピンの配置について Breakout Boardに接続したEdisonを裏返すと、スルーホ ... Read More »

Apache Sparkを試しています。 高速な分散処理エンジンApache Sparkの操作を対話シェルで試してみる！ Apache SparkをJavaアプリケーションから使う。 ここまでは、単一のホストで動作を試していましたが、分散処理のためのライブラリなので、複数ホストで試さなければ本当の性 ... Read More »

「高速な分散処理エンジンApache Sparkの操作を対話シェルで試してみる！」に続いて、Apache Sparkの操作をJavaからしてみます。 Apache SparkをJavaから操作 下記のSparkのプログラミングガイドを参考にしました。 Spark Programming Guide ... Read More »

最近、規模の大きなデータを、高速に処理する方法を調べています。 Apache Sparkは高速な分散処理エンジン 「高速に」といっても、「スループットが高い」という意味と、「レスポンスが早い」という意味があります。 「スループットが高い」というのは、一定時間にどれだけたくさんの処理ができるかです。「 ... Read More »

最近、関数型プログラミングの勉強を始めました。 読んでいる本 この本を読んでいます。 関数プログラミング実践入門 ──簡潔で、正しいコードを書くために この本のサンプルコードがHaskellで書かれていて、Haskellを試しながらでないと理解しきれないような気がしてきたので、Haskellを試せる ... Read More »

「Intel Edisonの初期設定をする。」では、Edisonの初期設定をしました。 続いて、Edisonの「コンピュータ」としての能力を試すべく、Edisonの上にWebサーバを起動してみます。 Intel EdisonにSSHで接続する ここまでEdisonには、USBケーブルで接続して操作を ... Read More »

会社のメンバーが増えてきて、もっとマネジメントとかリーダーシップの能力を高めていこう、という話題になりました。 読んだ本 そこで、この本を読みました。 人を動かし、自分を導く リーダーシップ (VISIONARY SEMINARS) この手の本は今までにも何冊か読んだことあるんですが、本によって意見 ... Read More »

「SDカードサイズのコンピュータIntel Edisonを購入！」に続いて、Intel Edisonの初期設定をしてみます。 最新のファームウェア書き込み 購入したEdisonの初期のバージョンは下記。 # cat /etc/version edison-weekly_build_56_2014-0 ... Read More »