Microsoft Azure HDInsight、Hadoop 2.4 をサポート & HBase クラスター利用可能に

Apache Hadoop 100% 互換のビックデータ解析サービスである Microsoft Azure HDInsight が Hadoop 2.4 に対応しました。 Hive 0.13 にて Apache Tez が利用できるようになり、Hadoop クエリのパフォーマンスが 100倍以上に改善されたほか、NoSQL データベースの Apache HBase がベータ機能として利用できるようになります。  また、操作が容易な Web 画面が提供され、Hive 経由で GUI 画面からクエリー作成などの操作が行えるようになります。Azure HDInsight では Azure BLOB ストレージにデータを保存しており、Blob データへのクエリーのパフォーマンスも改善されます。 Microsoft Azure Blog > Azure HDInsight supports Hadoop 2.4 for 100x faster queries on Azure Blobs Azure HDInsight previewing HBase clusters…

0

Windows Azure HDInsight 正式提供開始

Windows Azure 上で Apache Hadoop によるビックデータ分析機能を提供する Windows Azure HDInsight が正式提供開始となりました。 クラウドを活用することで、クラスタ作成にかかっていた時間を数分に短縮でき、必要なサーバーリソースをすぐに調達できます。データを保持したまま、より大きなクラスターを再作成することも可能です。また、Secure Node により Hadoop クラスターは保護されており、PowerShell による Hadoop クラスターの管理が可能です。 .NET 言語や Java、その他の言語にも対応し、.NET では Hive へのアクセスに LINQ (LINQ to Hive) も利用できます。 分析結果は Microsoft Office から PowerPivot、Power View などにより抽出できます。また、Power Query により HDInsight と他のデータを統合でき、Excel の Power Map や 3D Mapping を利用して、データを地図上にマッピングして表示できます。 Windows Azure Team Blog > Windows Azure HDInsight is now Generally…

0

Apache Hadoop を Windows Server & Windows Azure で活用 ~ Microsoft HDInsight Server & HDInsight Service

Windows Azure では Windows Azure HDInsight で Apache Hadoop を利用できますが、Windows Server でも Apache Hadoop を利用できます。Hortonworks との提携によりエンタープライズ向け、Windows 版の Apache Hadoop の開発が進められており、Microsoft HDInsight for Windows Server という名称でプレビュー公開されています。 (2012 年 10 月 公開の Community Preview から Developer Preview にアップデートされています。) こちらは Microsoft HDInsight をインストールしたい Windows Server から Web Platform Installer 軽油で直接インストールでき、System Center 2012 から管理することができます。 Microsoft HDInsight の活用例として、Xbox 向けゲーム開発を行っている 343 Industories が Windows Azure HDInsight を利用して、Xbox 向けゲームタイトル…

0

Windows Azure 正式サービススタート 3 周年 ~ サービスおよび公開ステータス一覧

本日 2/1 で Windows Azure が日本で正式リリースとなって 3 周年です。(2011 年 2 月に正式提供開始)  この 1 年で Windows Azure Web サイトや 仮想マシン をはじめとして、サービスの幅がぐっと広がりました。 現在のサービスの 正式公開(GA: General Availability) / プレビュー (Preview/Private Preview) のステータスをまとめました。有償サポートは GA となったサービスが対象になります。プレビューのサービスは MSDN/TechNet フォーラムでの Q&A となります。 日本語では Windows Azure 全般 / SQL Azure 全般 という 2 つのフォーラムが用意されています。GA / プレビュー のどちらでも無償でご質問いただけます。英語では各サービス別にフォーラムが用意されていますので、より詳細はそちらでお尋ねいただくと良いかと思います。   サービス公開 フォーラム (英語) コンピューティング Windows Azure…

0

Windows Azure HDInsight Service ~ Hadoop サービス を Windows Azure と Windows Server で提供

米国ニューヨークで 10/23-25 (現地時間) に開催されている Strata Conference + Hadoop World にて Windows Azure および Windows Server で稼働する Apache Hadoop をベースとした Big Data ソリューションが発表されました。これらはエンタープライズレベルでの Hadoop の利用を促進することを目的としており、.NET による開発や Excel、PowerPivot for Excel、Power Viewを用いた分析結果の抽出が可能になります。 Windows Azure HDInsight は、これまで Hadoop based service for Windows Azure という名称で招待制プレビューが提供されていました。Windows Azure HDInsight となっても、まずは招待制プレビューとなりますが、Hadoop のアップデート (HDFSおよび Map/Reduce、Pig、Hive、Sqoop の Stable 版) が含まれ、Visual Studio で .NET による Hadoop…

0

Microsoft Interoperability Team が新会社 Microsoft Open Technologies へ

相互運用性、標準化規格、オープンソースを担う新子会社、Microsoft Open Technologies が設立されました。 新会社の核となった Interoperability Team は W3C による HTML5、IETF による HTTP 2.0、DMTF / OASIS によるクラウド標準といった標準化規格の策定に参画、また、Node.js、MongoDB、Phonegap/Cordova、jQuery Mobile といったオープンソースへのサポートを行ってきました。この一環として Windows Azure では .NET / Node.js / java / php が利用できるようになっており、MongoDB や Hadoop にも対応しています。  新会社となることで、これまで行ってきた標準化規格への取り組みやオープンソースとの協力関係がより一層進んでゆくことになります。 Interoperability @ Microsoft > Announcing one more way Microsoft will engage with the open source and standards communities

0

Hadoop based service for Windows Azure、"2nd" プレビュー公開

大規模データの分散処理を行うフレームワークである Hadoop を Windows Azure 上で利用できる Hadoop based service for Windows Azure がアップデートされました。”Second Preview” として利用が可能になっています。 機能強化などは以下になります; 格納できるデータ量を 4 倍に HDFS(Hadoop Distributed File System) NameNode の障害復旧による信頼性向上 Apache Mahout といった Hadoop プロジェクトの分析手法をサポート SQL Server Analysis Services / Reporting Services による Excel / Sharepoint (PowerPivot)、SQL Server 2012 Power View からの利用 これまでも招待制プレビューとして公開されておりましたが、引き続き招待制となっており、Microsoft Connect の Web サイト よりお申し込みいただけます。 Apache Hadoop-based Service…

0

Windows Azure Libraries for Java リリース、Windows Azure Service Bus をサポート ~ マイクロソフトのオープンソース、オープン標準への取り組み

Windows Azure Libraries for Java (の最新版) が利用可能になっており、Windows Azure Service Bus で REST API によるアクセスがサポートされています。 GitHub > Windows Azure Libraries for Java Windows Azure アプリケーションを Java で開発するための Eclipse ツールやエミュレーターなどは Windows Azure SDK for Java に含まれています。 Windows Azure Website (English | United States) > Windows Azure Java Developer Center ※日本語ページ (www.windowsazure.com/ja-jp/) に遷移してしまう場合は、画面左下の言語&ロケーション を “日本語 (日本)” から “English (United…

0

Windows Azure December 2011 Update まとめ

日本時間 12/14 早朝(?) に Learn Windows Azure が開催されましたが、今週 Windows Azure Web サイトをはじめとして さまざまなアップデートが行われましたので、その内容を お届けします。   ■ Windows Azure Web サイト リニューアル   詳細は 12/12 Post をご覧ください。   ■ Windows Azure SDK の多言語、多様なプラットフォーム 、OSS 対応 Windows Azure SDK 1.6 から “Windows Azure SDK for .NET” という正式名称になりましたが、.NET 以外に node.js / Java / PHP に対応した Windows Azure SDK や 各種ツール、ソースコードなどがそれぞれ利用可能になっています。Web…

0

SQL PASS Summit 2011 アナウンス (1) : Windows Azure で稼働する Hadoop ベースの Big Data ソリューション対応を発表

先週米国シアトルにて、SQL Server ユーザーコミュニティである SQL PASS のカンファレンス、SQL PASS Summit 2011 が開催され、SQL Azure 関連の最新情報やアップデートが公開されました。その一つとして、SQL Server 2011 および Windows Server / Windows Azure 上で稼働する、エンタープライズレベルの Hadoop ベースによる Big Data ソリューションの提供、および Hadoop 推進企業である Hortonworks との戦略的提携がアナウンスされました。 こちらはクラウドで、またはオンプレミス(社内設置)とクラウドのハイブリッド環境で Big Data ソリューションが利用可能になります。Windows Azure 上で稼働する CTP(Community Technology Review) 版が年内に利用可能になる予定です。 The Official Microsoft Blog > Microsoft Expands Data Platform to Help Customers Manage the ‘New Currency of…

0