|
 |
Персональные инструменты
Просмотры |
|
Персональные инструменты |
|
||
|
|
РИТ:Высокие нагрузки-2008 (Отчет Стаса Фомина)/HCS — система хранения данных в РамблереМатериал из CustisWiki< РИТ:Высокие нагрузки-2008 (Отчет Стаса Фомина)
Версия от 22:13, 9 апреля 2011; StasFomin (обсуждение | вклад) (Новая страница: «=== HCS — система хранения данных в Рамблере === * [http://www.highload.ru/papers2008/7168.html Презентация и видео]...») Это снимок страницы. Он включает старые, но не удалённые версии шаблонов и изображений. HCS — система хранения данных в РамблереHCS (Hierarchically Compressed Stream) — некая библиотека для реализации некоторой алгебры операций (слияния, фильтрация, агрегация,…) над сверхбольшими плоскими файлами. (1011 строк, 10Tb/ 200Gb обновлений в день). Работает быстро (сравнивали правда с неоптимизированными движками MySQL), но, насколько я понял, это не параллелиться (а ведь есть Hadoop, который вроде как можно было бы применить для этих задач). Вроде готовится к публикации в опен-сорс.
|
 |
 |
 |
Примечание два года спустя — так и не выложили.