Windows Azure HDInsight

Hallo zusammen,

heute ist es Zeit für ein paar News im Bereich Apache Hadoop Services for Windows Azure, da es eine neue Preview (Oktober 2012) gibt:

Aus Apache Hadoop Services for Windows Azure wird Windows Azure HDInsight.

Alle Apache Hadoop Komponenten (Hadoop Common, Hive usw.), wurden entsprechend dem Entwicklungsstand der Apache.ORG aktualisiert.

Es gibt aktualisierte Hive ODBC Treiber. Diese benötigt ihr z.B. um über Excel Auswertungen zu starten. Solltet ihr bereits eine ältere Preview verwenden, unbedingt neuinstallieren.

Per Default basierte der programmgesteuerte Zugriff bisher auf JavaScript. Für C# oder F# – Entwickler steht aber ab sofort auch eine API zur Verfügung, um Map bzw. Reduce Jobs über Hadoop Streaming direkt in .NET zu erstellen.

NuGET Package

• Microsoft .NET Map Reduce API For Hadoop 0.0.0.4
• http://nuget.org/packages/Microsoft.Hadoop.MapReduce

Code Edition

• Microsoft .NET SDK For Hadoop
• http://hadoopsdk.codeplex.com/

Eine weitere Neuerung für Entwickler ist der Microsoft HDInsight Server (aka. Apache Hadoop Services for Windows Server). Diese Preview kann von Entwickler benutzt werden, um typische Szenarien im Entwicklungsprozss zu simulieren. Einzigste Einschränkung: Der HDInsight Server läuft nur im Single Node – Betrieb (Kein Cluster!)

Ressourcen:

Annoucement

• http://blogs.msdn.com/b/windowsazure/archive/2012/10/24/getting-started-with-windows-azure-hdinsight-service.aspx

Produkthomepage (mit Anmeldemöglichkeit)

• https://www.hadooponazure.com/

Getting Started with Microsoft HDInsight

• http://gettingstarted.hadooponazure.com/

Hier findet ihr zahlreiche Informationsangebote zum Einstieg in Windows Azure HDInsight.

Insbesondere empfehle ich euch das Microsoft HDInsight Jumpstart Guide herunterzuladen (Den Link findet ihr, wenn ihr die Hello World Kachel drückt)

Microsoft HDInsight Server

Für der HDInsight Server benötigt ihr den Web Platform Installer (hier). Einfach als Suchbegriff Hadoop eingeben und den angezeigten Anweisungen folgen.

Schöne Grüße

Oliver

Nachtrag: Für alle die auf der Suche nach weiteren Details sind, empfehle ich den Blog von Sascha

• http://www.sascha-dittmann.de/post/Microsoft-HDInsight-fuer-Windows-Server-CTP-aka-Apache-Hadoop.aspx