Обработка больших данных
Отрывок из книги
На базе идей MapReduce и вдохновлённый публикациями Google, Дуг Каттинг и Майк Кафкарелла начали работу над проектом с открытым исходным кодом, который в итоге стал известен как Hadoop. Первоначально Hadoop был создан как часть проекта Nutch – поисковой системы, также разрабатываемой Дугом Каттингом, – однако вскоре Hadoop выделился в отдельный проект, полностью сосредоточенный на хранении и обработке больших данных. Одним из первых пользователей и активных участников разработки Hadoop стала компания Yahoo, которая в 2006 году внедрила его для своих задач, связанных с обработкой огромных объёмов веб-данных.
Одним из ключевых компонентов Hadoop стала распределённая файловая система HDFS (Hadoop Distributed File System). HDFS была разработана для того, чтобы решать проблемы хранения и управления данными в распределённых системах. Основная идея HDFS заключалась в том, чтобы хранить данные не на одном сервере, а распределять их по множеству серверов в кластере, что обеспечивало высокую надёжность и отказоустойчивость. В случае выхода из строя одного из серверов данные не терялись, так как они были дублированы на других узлах кластера. HDFS также обеспечивала эффективное распределение данных между узлами и позволяла параллельно обрабатывать их с помощью MapReduce.
У нас есть только неполная версия книги.
Книги из серии:
Без серии
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
Комментарии:
Популярные книги
Идеальный мир для Лекаря 25
25. Лекарь
Фантастика
:фэнтези
,юмористическое фэнтези
,аниме
.
5.00
рейтинг книги
Кодекс Крови. Книга VIII
8. РОС: Кодекс Крови
Фантастика
:фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Камень Книга двенадцатая
12. Камень
Фантастика
:боевая фантастика
,городское фэнтези
,аниме
,фэнтези
.
5.00
рейтинг книги
Возвышение Меркурия. Книга 4
4. Меркурий
Фантастика
:героическая фантастика
,боевая фантастика
,попаданцы
.
5.00
рейтинг книги
Три `Д` для миллиардера. Свадебный салон
Любовные романы
:современные любовные романы
,короткие любовные романы
.
7.14
рейтинг книги
Хозяйка дома в «Гиблых Пределах»
Любовные романы
:любовно-фантастические романы
.
5.75
рейтинг книги
Неудержимый. Книга VIII
8. Неудержимый
Фантастика
:фэнтези
,попаданцы
,аниме
.
6.00
рейтинг книги
Мимик!
1. Сбой Системы!
Фантастика
:боевая фантастика
.
5.40
рейтинг книги
Попаданка для Дракона, или Жена любой ценой
Любовные романы
:любовно-фантастические романы
.
7.17
рейтинг книги
Законы Рода. Том 5
5. Граф Берестьев
Фантастика
:юмористическое фэнтези
,аниме
.
5.00
рейтинг книги
Наследник
1. Старицкий
Приключения
:исторические приключения
.
5.00
рейтинг книги
Мастер Разума II
2. Мастер Разума
Фантастика
:героическая фантастика
,попаданцы
,аниме
.
5.75
рейтинг книги
Газлайтер. Том 9
9. История Телепата
Фантастика
:фэнтези
,попаданцы
.
5.00
рейтинг книги
Всадники бедствия
8. Покоривший СТЕНУ
Фантастика
:фэнтези
,попаданцы
,рпг
.
5.00
рейтинг книги
Повелитель механического легиона. Том VII
7. Повелитель механического легиона
Фантастика
:технофэнтези
,аниме
,фэнтези
.
5.00
рейтинг книги
С Д. Том 16
16. Сердце дракона
Фантастика
:боевая фантастика
.
6.94
рейтинг книги
Чужая семья генерала драконов
6. Генералы драконов
Фантастика
:фэнтези
.
5.00