hpc-guia-bigdata
Guía de Usuario de Big Data
Pasos para trabajar con Big Data:
1. Conectarse por ssh al puerto 22 de los nodos de entrada del clúster Big Data bdlogin01.uo.hpc.cu ó bdlogin02.uo.hpc.cu.
Desde esta conexión se tiene acceso a todos los comandos hadoop y spark que permiten ejecutar trabajos en el clúster (https://spark.apache.org/docs/latest/running-on-yarn.html).
2. El estado de los trabajos enviados puede ser inspeccionado a través de http://bdmaster01.uo.hpc.cu:8088/.
3. Para ejecutar códigos (scala, python, R) de manera interactiva se puede acceder al Zeppelin desde http://bdlogin01.uo.hpc.cu:9995 utilizando la cuenta asignada para los servicios del clúster.
hpc-guia-bigdata.txt · Última modificación: 2020/02/18 13:38 por Beatriz Valdés Díaz