Google Cloud Platformチームに所属したデータハッカーである著者が、ビッグデータの分析システムを構築するためのツールやテクニック、ポイントについて、実践的にアドバイスする。 ビッグデータ・システムを成功させるためのガイドラインや、NoSQLや分散コンピューティング、CAP定理の基礎知識解説から始まり、HadoopやHiveを使った大規模な分析や、BigQueryを使ったリアルタイム分析の基礎にも触れる。さらには、MapReduceパイプラインやPig、Cascading、Ma……

データサイエンティスト協会、九州支部を設立 2013年の設立以来、新しい職業「データサイエンティスト」が市場において健全な地位を確立し、継続的に発展する環境の整備を目的に、首都圏を中心に活動を行ってきた一般社団法人データサイエンティスト協会は、新たに「データサイエンティスト協会 九州支部」を設立したと発表した。 蓄積データをビジネスに活用したいと考える企業の増加によって、近年、国内のあらゆる企業がデータサイエンティストの獲得や育成に高い関心を示しており、ビッグデータから「ビジ……

急速に広まっているIoTの分野におけるAIの活用が、実業務において成果を得るレベルに到達できる企業が少ない原因は、AIにおける学習モデルの精度にある。AIにとって最も重要な点は「データの良しあし」であるが、現実にはAIに適したデータを収集するのは容易ではない。最善のデータ収集方法は「データの前処理」にある。 本書は、日立産業制御ソリューションズ AI&ビッグデータソリューションセンタが取り組んできた「IoTで生まれるビッグデータ」をAIに与えるためのデータの前処理に関する実践的なノウハ……

Java及びJava仮想マシン（JVM）用のオープンソース分散ディープラーニングライブラリで、 ディープラーニングアルゴリズムを広くサポートする計算フレームワーク。Clojureとも互換性がありScalaのAPIを含んでいる。アダム・ギブソンの率いるサンフランシスコの機械学習グループによって主に開発されたオープンソースのプロジェクト。訓練はクラスタで行われ、ニューラルネットは、Hadoop/YARN及びSparkで使用できるiterative reduceを経由して同時に訓練を受ける。また、Cu……

オープンソースのディープラーニングライブラリで、画像認識に特化しており、高速処理が可能。C++で実装され、C++/Python/MATLABで使用できる。「高速動作」「GPU対応」「洗練されたアーキテクチャ/ソースコード」「開発コミュニティが活発」などの特徴がある。カリフォルニア大学バークレー校のコンピュータビジョンおよび機械学習に関する研究センターであるBVLCが中心となって開発しているOSS。2014年6月からヤフージャパンが同センターのスポンサーになっており、センターの研究の支援を行ってい……

Facebookの人工知能研究グループにより初期開発されたPython向けのオープンソース機械学習ライブラリ。柔軟なニューラルネットワークの記述ができ、書きやすさと使いやすさから人気がある。特徴は「Numpyと類似した操作方法」「海外を中心にコミュニティが活発」「動的な計算グラフ」など。