Al revisar el origen y motivación en el desarrollo de Apache Spark, ya veíamos que su objetivo era proporcionar una mejor alternativa para determinados casos de uso de procesamiento de datos en los que el modelo MapReduce no era del todo eficiente, tal y como estaba concebido de inicio e implementado por ejemplo en Apache Hadoop. El propio Hadoop ha ido haciendo frente a alguna de estas limitaciones, dentro de su evolución en sus sucesivas versiones. El hito más significativo lo marca la revisión que a finales de 2011 sufre en una parte importante de su implementación del modelo MapReduce, con la mejora aportada por YARN (Yet Another Resource Negotiatior), su nuevo gestor interno de tareas y recursos.
Cabecera personalizada
El blog de Mikel Niño
Industria 4.0, Big Data Analytics, emprendimiento digital y nuevos modelos de negocio
Industria 4.0, Big Data Analytics, emprendimiento digital y nuevos modelos de negocio
Mostrando entradas con la etiqueta hortonworks. Mostrar todas las entradas
Mostrando entradas con la etiqueta hortonworks. Mostrar todas las entradas
Recopilación de tutoriales online para Apache Hadoop
Etiquetas:
apache-hadoop,
apache-hive,
apache-pig,
apache-software-foundation,
big-data,
cloudera,
hdfs,
hortonworks,
ibm,
map-reduce,
technology-stack,
yahoo
Suscribirse a:
Entradas (Atom)

