Обработка больших данных
Отрывок из книги
На базе идей MapReduce и вдохновлённый публикациями Google, Дуг Каттинг и Майк Кафкарелла начали работу над проектом с открытым исходным кодом, который в итоге стал известен как Hadoop. Первоначально Hadoop был создан как часть проекта Nutch – поисковой системы, также разрабатываемой Дугом Каттингом, – однако вскоре Hadoop выделился в отдельный проект, полностью сосредоточенный на хранении и обработке больших данных. Одним из первых пользователей и активных участников разработки Hadoop стала компания Yahoo, которая в 2006 году внедрила его для своих задач, связанных с обработкой огромных объёмов веб-данных.
Одним из ключевых компонентов Hadoop стала распределённая файловая система HDFS (Hadoop Distributed File System). HDFS была разработана для того, чтобы решать проблемы хранения и управления данными в распределённых системах. Основная идея HDFS заключалась в том, чтобы хранить данные не на одном сервере, а распределять их по множеству серверов в кластере, что обеспечивало высокую надёжность и отказоустойчивость. В случае выхода из строя одного из серверов данные не терялись, так как они были дублированы на других узлах кластера. HDFS также обеспечивала эффективное распределение данных между узлами и позволяла параллельно обрабатывать их с помощью MapReduce.
У нас есть только неполная версия книги.
Книги из серии:
Без серии
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
Комментарии:
Популярные книги
Душелов. Том 3
3. Внутренние демоны
Фантастика
:альтернативная история
,аниме
,фэнтези
,ранобэ
,хентай
.
5.00
рейтинг книги
Кто ты, моя королева
Любовные романы
:любовно-фантастические романы
.
7.67
рейтинг книги
Отморозок 2
2. Отморозок
Фантастика
:попаданцы
.
5.00
рейтинг книги
Плохой парень, Купидон и я
Любовные романы
:современные любовные романы
.
5.00
рейтинг книги
Последний Паладин. Том 3
3. Путь Паладина
Фантастика
:юмористическое фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Лучший из худших-2
2. Лучший из худших
Фантастика
:фэнтези
.
5.00
рейтинг книги
Гоплит Системы
5. Пехотинец Системы
Фантастика
:фэнтези
,рпг
,фантастика: прочее
.
5.00
рейтинг книги
Адвокат вольного города
1. Адвокат
Фантастика
:городское фэнтези
,альтернативная история
,аниме
.
5.00
рейтинг книги
Сумеречный Стрелок 5
5. Сумеречный стрелок
Фантастика
:городское фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Черный Маг Императора 12
12. Черный маг императора
Фантастика
:юмористическое фэнтези
,попаданцы
,аниме
,сказочная фантастика
,фэнтези
.
5.00
рейтинг книги
Как я строил магическую империю 4
4. Как я строил магическую империю
Фантастика
:боевая фантастика
,постапокалипсис
,аниме
,фантастика: прочее
,фэнтези
.
5.00
рейтинг книги
Кодекс Охотника. Книга IX
9. Кодекс Охотника
Фантастика
:боевая фантастика
,городское фэнтези
,попаданцы
.
5.00
рейтинг книги
Измена. Свадьба дракона
Любовные романы
:любовно-фантастические романы
,эро литература
.
5.00
рейтинг книги
Идеальный мир для Лекаря 21
21. Лекарь
Фантастика
:фэнтези
,юмористическое фэнтези
,аниме
.
5.00
рейтинг книги
Жена моего брата
1. Черкасовы-Ольховские
Любовные романы
:современные любовные романы
.
6.25
рейтинг книги
На границе империй. Том 8. Часть 2
13. Фортуна дама переменчивая
Фантастика
:космическая фантастика
,попаданцы
.
5.00
рейтинг книги
Полковник Гуров. Компиляция (сборник)
Полковник Гуров
Детективы
:криминальные детективы
,шпионские детективы
,полицейские детективы
,боевики
,крутой детектив
.
5.00