Google Cloud Platformチームに所属したデータハッカーである著者が、ビッグデータの分析システムを構築するためのツールやテクニック、ポイントについて、実践的にアドバイスする。 ビッグデータ・システムを成功させるためのガイドラインや、NoSQLや分散コンピューティング、CAP定理の基礎知識解説から始まり、HadoopやHiveを使った大規模な分析や、BigQueryを使ったリアルタイム分析の基礎にも触れる。さらには、MapReduceパイプラインやPig、Cascading、Ma……

好評だった『Hadoop徹底入門』の第2弾。 Hadoopは、多数のコンピュータを束ねて極めて大きな処理ができるオープンソースの分散処理フレームワークで、多数のPCをつなぎ巨大な処理を短時間で可能にする。MapReduceというJavaフレームワークでプログラミングできるほか、標準入出力が使えるHadoopStreaming、フロー記述環境Pig、SQL風インターフェイスであるHiveなど多彩な環境を備えている。行指向DBのHBaseやログコレクタのFluentdの基盤としても利用できるなど、……

データサイエンティスト協会、九州支部を設立 2013年の設立以来、新しい職業「データサイエンティスト」が市場において健全な地位を確立し、継続的に発展する環境の整備を目的に、首都圏を中心に活動を行ってきた一般社団法人データサイエンティスト協会は、新たに「データサイエンティスト協会 九州支部」を設立したと発表した。 蓄積データをビジネスに活用したいと考える企業の増加によって、近年、国内のあらゆる企業がデータサイエンティストの獲得や育成に高い関心を示しており、ビッグデータから「ビジ……

急速に広まっているIoTの分野におけるAIの活用が、実業務において成果を得るレベルに到達できる企業が少ない原因は、AIにおける学習モデルの精度にある。AIにとって最も重要な点は「データの良しあし」であるが、現実にはAIに適したデータを収集するのは容易ではない。最善のデータ収集方法は「データの前処理」にある。 本書は、日立産業制御ソリューションズ AI&ビッグデータソリューションセンタが取り組んできた「IoTで生まれるビッグデータ」をAIに与えるためのデータの前処理に関する実践的なノウハ……

「データの分析能力」「データを処理するIT能力」「ビジネスの課題解決能力」という必要な3つの能力を併せ持ったデータサイエンティスト人材は不足しており、今後はさらに人材のニーズが高まると予想されています。 そこで、初心者の方を対象にデータサイエンティストの基礎的な内容を短時間で理解して頂くために開発したのが本講座です。受講者は、わかりやすいビデオ講座でデータ活用の基礎知識やデータサイエンティストの業務内容を学んでいただけます。 講座は、スマートフォンやPC、タブレット等で好きな時間に視聴できる……

BOOTCAMPは、SOMPOホールディングスとデジタルハリウッドが運営するエンジニア起業家の養成学校であり、短期間で一気に「データサイエンティスト」を養成します。 G's ACADEMY TOKYOが連携して、最初の1ヵ月には短期集中でデータサイエンスのツールを学び、その後にSOMPOホールディングスが保有するビックデータ「Driving Data」「Vital Data」などを活用して、一流メンターがサポートする「プロジェクトベースドラーニング」で社会課題の解決や新規事業創出へ挑戦する実戦……