1. HUG France #1 - 15 Mars 2012
Hadoop sur Azure
Javascript
Benjamin GUINEBERTIÈRE
bengui@microsoft.com
@benjguin

2. Hadoop sur Windows Azure
● www.hadooponazure.com
● Création automatisée d’un cluster Hadoop sur le
public PaaS de Microsoft: Windows Azure
● Hadoop sur Windows Azure et Windows Server
(sans Cygwin)
● Hadoop classique (jobs Java, PIG, HIVE, HDFS, …)
● Parmi les contributions proposées par Microsoft:
Javascript

5. Javascript sur Hadoop On Azure
● Dans la JVM (Rhino)
● Jobs map/reduce en Javascript
● Console interactive
● HDFS #ls
● RunJS runJs("bin/iisLogsAnalysis.js", "iislogs", "out-HD")
● HIVE hive.exec("SELECT * FROM hiveresult LIMIT 50")
● Syntaxe à la LINQ pour générer du PIG
pig.from("out-H", "dummy, sessionID, username, startDateTime, endDateTime,
nbHits:long").select("username, sessionID, nbHits").orderBy("nbHits
DESC").take(5).to("demo-iislogs-out-H-top5")
● Graphiques simples
graph.bar(data, { x: "user", y: "hits", orientation: "90" })

6. Map Reduce, en Java, C#, Javascript
6

7. Scénario démo : Analyse de Logs Serveur Web IIS
SQL Server
HIVE ODBC Driver
Excel
HIVE ODBC Driver Graph.bar(data)
Hive
Blob Map Reduce
Logs IIS Storage distcp
HDFS iislogsAnalysis.js
7

8. DÉMO

9. Pour en savoir plus
● Après-midi du dév le 24 mai 2012
● http://aka.ms/amdev-hadoop

10. HUG France #1 - 15 Mars 2012
Hadoop sur Azure - Javascript
Merci pour votre attention
Benjamin GUINEBERTIÈRE
bengui@microsoft.com
@benjguin