patterns & practices の新しいガイダンス「Developing big data solutions on Microsoft Azure HDInsight」公開

patterns & practices の新しいガイダンスとして、ビッグデータ ソリューションを構築するための「Developing big data solutions on Microsoft Azure HDInsight 」が公開されました。 こちらは、既存システムや多種多様なデバイスなどから集められる(Velocity) 、既存のスキーマに留まらない、構造化された/されていない、様々な形式の(Variety) 、大量の (Volume) のデータ (=ビッグデータ) を一元化し、効率的に解析、有用なデータを取得するためのソリューションを構築する、手引書となっています。 以下のような 3 部構成になっており、Azure HDInsight に限らず Hadoop を利用したビックデータ 分析ソリューションを構築する際にも参考になる内容となっています。 Developing big data solutions on Microsoft Azure HDInsight Understanding Microsoft big data solutions : ビッグデータの利用意義などの基礎知識 Designing big data solutions using HDInsight : ビックデータの典型的な利用パターンとソリューション構築方法 Implementing big data solutions using HDInsight…

0

Microsoft Azure HDInsight、Hadoop 2.4 をサポート & HBase クラスター利用可能に

Apache Hadoop 100% 互換のビックデータ解析サービスである Microsoft Azure HDInsight が Hadoop 2.4 に対応しました。 Hive 0.13 にて Apache Tez が利用できるようになり、Hadoop クエリのパフォーマンスが 100倍以上に改善されたほか、NoSQL データベースの Apache HBase がベータ機能として利用できるようになります。  また、操作が容易な Web 画面が提供され、Hive 経由で GUI 画面からクエリー作成などの操作が行えるようになります。Azure HDInsight では Azure BLOB ストレージにデータを保存しており、Blob データへのクエリーのパフォーマンスも改善されます。 Microsoft Azure Blog > Azure HDInsight supports Hadoop 2.4 for 100x faster queries on Azure Blobs Azure HDInsight previewing HBase clusters…

0

Microsoft patterns & practices に Windows Azure によるビックデータソリューションガイドを追加

Microsoft .NET のアプリケーション設計・開発における実践的ガイド、Microsoft patterns & practices の Windows Azure Guide としては第 4 弾となる、 Windows Azure HDInsight による ビックデータソリューション構築ガイド、Developing Big Data Solutions on Windows Azure が追加されました。 ビッグデータソリューションの導入計画や HDInsight を利用することによるメリットについてはもちろん、データの準備や BI ツールなどから利用できるようにするための設定についても記載されています。また、想定されるビックデータ活用のシナリオ例として、Twitter の公式アカウントを利用したオンラインマーケティングを取り上げ、Windows Azure HDInsight で感情分析 (Sentiment Analysis) を行い、Excel で結果を取得できるようにするまでの手順について紹介しています。 WAAG – Part 4 Developing Big Data Solutions on Windows Azure CodePlex > patterns & practices – Windows Azure Guidance

0

Apache Hadoop を Windows Server & Windows Azure で活用 ~ Microsoft HDInsight Server & HDInsight Service

Windows Azure では Windows Azure HDInsight で Apache Hadoop を利用できますが、Windows Server でも Apache Hadoop を利用できます。Hortonworks との提携によりエンタープライズ向け、Windows 版の Apache Hadoop の開発が進められており、Microsoft HDInsight for Windows Server という名称でプレビュー公開されています。 (2012 年 10 月 公開の Community Preview から Developer Preview にアップデートされています。) こちらは Microsoft HDInsight をインストールしたい Windows Server から Web Platform Installer 軽油で直接インストールでき、System Center 2012 から管理することができます。 Microsoft HDInsight の活用例として、Xbox 向けゲーム開発を行っている 343 Industories が Windows Azure HDInsight を利用して、Xbox 向けゲームタイトル…

0

Windows Azure HDInsight Service ~ Hadoop サービス を Windows Azure と Windows Server で提供

米国ニューヨークで 10/23-25 (現地時間) に開催されている Strata Conference + Hadoop World にて Windows Azure および Windows Server で稼働する Apache Hadoop をベースとした Big Data ソリューションが発表されました。これらはエンタープライズレベルでの Hadoop の利用を促進することを目的としており、.NET による開発や Excel、PowerPivot for Excel、Power Viewを用いた分析結果の抽出が可能になります。 Windows Azure HDInsight は、これまで Hadoop based service for Windows Azure という名称で招待制プレビューが提供されていました。Windows Azure HDInsight となっても、まずは招待制プレビューとなりますが、Hadoop のアップデート (HDFSおよび Map/Reduce、Pig、Hive、Sqoop の Stable 版) が含まれ、Visual Studio で .NET による Hadoop…

0