суббота, 10 ноября 2012 г.

Hadoop User Group Meetup

Вчера, 8 ноября на монсарде Рамблера состоялся Hadoop User Group Meetup.

Эта была первая встреча, никто не знал до этого как и в каком виде надо проводить подобные сборища.
На первый раз у нас получилась мини конференция, на которойбыло 4 доклада:
  • Мой - про машинное обучение на MapReduce
  • Ильи Трофимова из Яндекса - про быстрое машинное обучение на подхаченном Hadoop'е

  • Владимир из Microsoft рассказал про hadoop в Windows Azure,
  • В конце Алексей из Doichebank'а поделился своим опытом развертывания hadoopa, hbase и других компонент.



По впечатлениям:

У нас с Илюхой (который яндексоид) получися ударный математический блок. Народ говорит, даже не думал, что сразу будут такие серьезные доклады. Я отметил для себя Wopal Vabbit на будущее, если действительно нам портебуется запускать на кластере быстые точные классификаторы, жертвуя при этом отказоустойчивостью.

Володя (из Империи Зла) рассказал об облачном сервисе весело и интересно, народ смеялся. Из полезного я узнал что в облаке Microsoft есть сервисы-хранилища для больших данных, данные можно хранить там, загружая на время расчетов на крастер, обрабатывая их там, а потом  грохая кластер. Облачный hadoop хорошо подходит стартапам, но крупные компании предпочитают иметь свои сервера. Hadoop на Windows будет  интересен тем, кто уже использует всю инфораструктуру MS и не готов с нее слезать ради больших данных.

Последний докладчик оказался java хардкорщиком, который рассказывал без доски и слайдов свои впечатления от знакомства с hadoop. Из-за того что доклад бы без презентации запомнился он мне урывками, процентов на 15%.
Плюс доклада: из него получился формат обсуждения, дележки
опытом, ради которой народ на эту конфу в общем то и пришел.

мои итоги:

- организовать Meetup оказалось просто, прошел он на хорошем уровне. Думаю что это связано с высоким уровнем профессионализма как выступавших, так и сотрудников Рамблера, которые помогли нам с организацией :)))
- доклады Ильи и Володи были мне полезны. Побольше бы
докладов, где рассказывается о разных hadoop штучках
- за продолжительностью докладов мы не следили - встреча явно затянулась
-среди пришедших на встречу было много серьезных специалистов. В следующий раз можно устроить "круглый стол" для дележки опытом.

П. С. Вот слайды со сделанных на meetup докладов:

Мезенцев Павел (Rambler). Машинное обучение на MapReduce на примере Mahout

Илья Трофимов (Yandex). Машинное обучение с помощью Vowpal Wabbit
 
Владимир Юнев (Microsoft). Слоны в облаках

Комментариев нет:

Отправить комментарий