Технология хранения и обработки больших данных Hadoop

Компьютеры и Интернет: прочая компьютерная литература

Apache Hadoop - это платформа для распределенной обработки больших наборов данных на кластерах компьютеров с использованием простых моделей программирования. В этой книге вы познакомитесь с общей архитектурой платформы, компонентами стека, такими как HDFS и MapReduce, приложениями Hadoop.

Просмотры: 7
Рейтинг: 5.0 - +
Язык: Русский
Версия: Полная

Описание

Введение Hadoop – это программная платформа с открытым исходным кодом Apache для хранения и крупномасштабной обработки больших наборов данных в распределенной среде кластеров компьютеров с использованием простых моделей программирования. Hadoop предназначен для масштабирования от отдельных серверов до тысяч машин, каждая из которых обеспечивает локальные вычисления и хранилище. Фреймворк Hadoop был создан Дагом Каттингом и Майком Кафареллой в 2005 году. Первоначально этот фреймворк был разработан для поддержки распространения проекта Nutch Search Engine построения поисковых систем. Даг, который в то время работал в Yahoo, а сейчас является главным архитектором в Cloudera, назвал этот проект в честь слона своего сына. Его сын назвал своего игрушечного слона Hadoop, и Даг использовал это имя, чтобы так назвать свой проект. Давайте посмотрим, что делает фреймворк Hadoop таким интересным, масштабируемым и удобным в использовании.