https://lib.custis.ru/index.php?action=history&feed=atom&title=ADD_2010%3A_%D0%9E%D1%82%D1%87%D1%91%D1%82_%D0%A0%D1%83%D1%81%D0%B5%D1%86%D0%BA%D0%BE%D0%B3%D0%BE_%D0%93%D0%B5%D0%BE%D1%80%D0%B3%D0%B8%D1%8F%2FApache_Hadoop 2026-07-05T17:37:02Z История изменений этой страницы в вики MediaWiki 1.26.4 https://lib.custis.ru/index.php?title=ADD_2010:_%D0%9E%D1%82%D1%87%D1%91%D1%82_%D0%A0%D1%83%D1%81%D0%B5%D1%86%D0%BA%D0%BE%D0%B3%D0%BE_%D0%93%D0%B5%D0%BE%D1%80%D0%B3%D0%B8%D1%8F/Apache_Hadoop&diff=32154&oldid=prev 2011-11-16T16:51:07Z

<p>Новая страница: «;<a href="/Apache_Hadoop_(%D0%92%D0%BB%D0%B0%D0%B4%D0%B8%D0%BC%D0%B8%D1%80_%D0%9A%D0%BB%D0%B8%D0%BC%D0%BE%D0%BD%D1%82%D0%BE%D0%B2%D0%B8%D1%87_%D0%BD%D0%B0_ADD-2010)" title="Apache Hadoop (Владимир Климонтович на ADD-2010)">Apache Hadoop (Владимир Климонтович на ADD-2010)</a> Доклад про свободный фреймворк &lt;tt&gt;Apache Hadoop&lt;/tt&gt; подд...»</p> <p><b>Новая страница</b></p><div>;[[Apache Hadoop (Владимир Климонтович на ADD-2010)]]<br /> <br /> Доклад про свободный фреймворк &lt;tt&gt;Apache Hadoop&lt;/tt&gt; поддерживающим выполнение распределённых приложений, работающих на больших кластерах, построенных на обычном оборудовании.<br /> Докладчик рассказал про алгоритм &lt;tt&gt;MapReduce&lt;/tt&gt;, используемый во фреймворке и распределённую файловую систему HDFS. Немного затронул тему перевода SQL-выражений в термины map-reduce.<br /> Были приведены примеры использования фреймворка в проектах Yahoo и Last.fm.<br /> Далее следовал рассказ об Apache Hive — инфраструктуре хранения и обработки данных, построенной поверх Hadoop. Возможные области применения: research, data mining, reporting. Достоинства:<br /> * Хорошая гладкая масштабируемость<br /> * Нулевая стоимость софта<br /> * Доступность выполнения задач по-запросу на мощностях Amazon Cloud Service.<br /> <br /> Недостатки:<br /> * Высокая стоимость поддержки и администрирования<br /> * Необходим штат высококвалифицированных java-разработчиков<br /> * Нестабильность<br /> * Низкая скорость / не realtime<br /> В завершении доклада было рассказано о реализации Bigtable БД поверх Hadoop — Hbase.<br /> <br /> '''В целом было интересно.'''</div>

StasFomin