WHUG Azure HDInsight
-
Upload
wlodek-bielski -
Category
Technology
-
view
62 -
download
2
description
Transcript of WHUG Azure HDInsight
Microsoft HDInsightHadoop na Windows Azure
Wlodek BielskiMCSE/MCSA/MCITP: SQL Server [email protected]
Big Data wg Microsoft
• Hadoop jako uzupełnienie SQL Server BI– Sterowniki, konektory
• Wiele rodzajów danych, jedno narzędzie– Excel 2013 + PowerBI
• Zarządzalność– Windows Server + System Center
Big Data wg Microsoft
Microsoft HDInsight
• Współpraca z Hortonworks (Hortoworks Data Platform for Windows)• HDInsight Server– Preview ograniczony do 1 węzła
• HDInsight Service – Windows Azure– Klaster Hadoop w chmurze
Architektura
• Węzły jako maszyny wirtualne Windows Azure• Dane w Azure Storage Vault lub HDFS• Kluczowe binaria jako usługi Windows
Tworzenie klastra HDInsight
Składniki HDInsight
• Hadoop 1.1.0• Hive 0.9.0• Pig 0.9.3• Sqoop 1.4.2• Oozie 3.2.0• HCatalog 0.4.1• Templeton 0.1.4• SQL Server JDBC Driver 3.0
• .NET SDK for Hadoop– .NET Streaming– LINQ to Hive
• PowerShell cmdlets• Hive ODBC Driver
Składniki HDInsight
Jak zacząć?
• Wersja testowa Windows Azurewww.windowsazure.com/pl-pl/pricing/free-trial
• Microsoftwww.windowsazure.com/en-us/documentation/services/hdinsight/
• Dokumentacja Windows Azure Guidancehttp://wag.codeplex.com/
• Dokumentacja Hortonworkswww.hortonworks.com/products/hdp