Información y ayuda

HPC Universidad de Oriente

Herramientas de usuario

Herramientas del sitio


hpc-guia-bigdata

Guía de Usuario de Big Data

Pasos para trabajar con Big Data:

1. Conectarse por ssh al puerto 22 de los nodos de entrada del clúster Big Data bdlogin01.uo.hpc.cu ó bdlogin02.uo.hpc.cu.

Desde esta conexión se tiene acceso a todos los comandos hadoop y spark que permiten ejecutar trabajos en el clúster (https://spark.apache.org/docs/latest/running-on-yarn.html).

2. El estado de los trabajos enviados puede ser inspeccionado a través de http://bdmaster01.uo.hpc.cu:8088/.

3. Para ejecutar códigos (scala, python, R) de manera interactiva se puede acceder al Zeppelin desde http://bdlogin01.uo.hpc.cu:9995 utilizando la cuenta asignada para los servicios del clúster.

hpc-guia-bigdata.txt · Última modificación: 2020/02/18 18:38 por Beatriz Valdés Díaz