Optimización de equipos de desarrollo
Esta es la cuarta entrega de la serie de videotutoriales sobre BigData. En esta ocasión lo que vamos a ver es la migración desde la versión 1.6 de los ejemplos del tercer video a la versión 2.0 de Spark.
Así que trabajaremos con el API de SQL, que es en el que se basan los videos anteriores.
Estos cambios para aplicaciones Java tienen su cierto trabajo ya que hay un API que desaparece. concretamente es el DataFrame.
El código lo tenéis en mi github
En esta ocasión os quiero dejar un vídeo de una reseña, o más bien opinión de un libro que he utilizado para aprender sobre Apache Spark.
El libro se llama Spark in Action.
Probablemente sea el libro más flojo de la línea de In Action que tengo. Yo lo achaco a que el tratar con cierta profundidad una herramienta tan extensa es complicado de hacer en un único libro.
De todas maneras me parece un libro muy indicado para la gente que quiera introducirse en el mundo de Spark y del BigData.
Cada vez va tomando mas importancia todos los temas relacionados con el BigData.
En el canal de Youtube he subido tres videos dedicados al desarrollo BigData con Spark.
Son vídeos muy básicos para poder hacerse una idea de los que supone desarrollar una aplicación BigData con Spark.
En el primer video se cubre la parte de instalación de las herramientas necesarias, siendo estas la máquina virtual de Java, el JBoss Developer Studio y las dependencias necesarias para desarrollar el proyecto con Maven.
El segundo video trata sobre la instalación del sistema de ficheros distribuido HDFS. Este sistema de ficheros es parte de Hadoop y es el típico sistema de ficheros de las soluciones BigData.
Y por último, y quizá mas interesante ya que se ve código, es el tercero. En el que se cubren cinco ejemplos.