Обработка больших данных
Отрывок из книги
На базе идей MapReduce и вдохновлённый публикациями Google, Дуг Каттинг и Майк Кафкарелла начали работу над проектом с открытым исходным кодом, который в итоге стал известен как Hadoop. Первоначально Hadoop был создан как часть проекта Nutch – поисковой системы, также разрабатываемой Дугом Каттингом, – однако вскоре Hadoop выделился в отдельный проект, полностью сосредоточенный на хранении и обработке больших данных. Одним из первых пользователей и активных участников разработки Hadoop стала компания Yahoo, которая в 2006 году внедрила его для своих задач, связанных с обработкой огромных объёмов веб-данных.
Одним из ключевых компонентов Hadoop стала распределённая файловая система HDFS (Hadoop Distributed File System). HDFS была разработана для того, чтобы решать проблемы хранения и управления данными в распределённых системах. Основная идея HDFS заключалась в том, чтобы хранить данные не на одном сервере, а распределять их по множеству серверов в кластере, что обеспечивало высокую надёжность и отказоустойчивость. В случае выхода из строя одного из серверов данные не терялись, так как они были дублированы на других узлах кластера. HDFS также обеспечивала эффективное распределение данных между узлами и позволяла параллельно обрабатывать их с помощью MapReduce.
У нас есть только неполная версия книги.
Книги из серии:
Без серии
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
Комментарии:
Популярные книги
Пограничная река. (Тетралогия)
Пограничная река
Фантастика
:фэнтези
,боевая фантастика
.
9.13
рейтинг книги
Если твой босс... монстр!
Любовные романы
:любовно-фантастические романы
.
5.50
рейтинг книги
Часограмма
5. Часодеи
Детские
:детская фантастика
.
9.43
рейтинг книги
Убивать чтобы жить 7
7. УЧЖ
Фантастика
:героическая фантастика
,космическая фантастика
,рпг
.
5.00
рейтинг книги
Вдовье счастье
1. Ваш выход, маэстро!
Фантастика
:попаданцы
,историческое фэнтези
,фэнтези
.
5.00
рейтинг книги
Чехов
1. Адвокат Чехов
Фантастика
:фэнтези
,боевая фантастика
,альтернативная история
.
5.00
рейтинг книги
Бастард Императора
1. Бастард Императора
Фантастика
:фэнтези
,аниме
.
5.00
рейтинг книги
Око василиска
2. Артефактор
Фантастика
:городское фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Кротовский, сколько можно?
5. РОС: Изнанка Империи
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Идеальный мир для Лекаря 23
23. Лекарь
Фантастика
:юмористическое фэнтези
,аниме
,фэнтези
.
5.00
рейтинг книги
Случайная свадьба (+ Бонус)
Любовные романы
:современные любовные романы
.
5.00
рейтинг книги
Гримуар темного лорда VII
7. Гримуар темного лорда
Фантастика
:боевая фантастика
,попаданцы
,аниме
,фэнтези
.
5.00
рейтинг книги
Академия проклятий. Книги 1 - 7
Академия Проклятий
Фантастика
:фэнтези
.
8.98
рейтинг книги
Ермак. Регент
10. Ермак
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Замуж с осложнениями. Трилогия
Замуж с осложнениями
Фантастика
:фэнтези
,юмористическая фантастика
,космическая фантастика
.
9.33
рейтинг книги
Пепел и кровь
4. Чужие интересы
Фантастика
:фэнтези
,попаданцы
.
5.00
рейтинг книги
Возвышение Меркурия. Книга 17
17. Меркурий
Фантастика
:попаданцы
,аниме
.
5.00