Solicitamos su permiso para obtener datos estadísticos de su navegación en esta web. Si continúa navegando consideramos que acepta el uso de cookies. OK | Política de cookies | Política de Privacidad

Máster HPC

  • Máster HPC

Suscribete

  • Suscribete a Novas CESGA

HPC User Portal

  • HPC User Portal

Compromisso com a igualdade

Cursos e eventos

quarta-feira 19/06/2019 13:43

Nova: Taller Big Data: Usando Spark 2

El CESGA celebrará el del 16 al 19 de julio un taller Big Data donde se explicarán los conceptos básicos de Apache Spark.  El taller será eminentemente práctico y los asistentes tendrán que resolver problemas diversos utilizando Spark. 

Al final del curso los asistentes tendrán los conocimientos necesarios para comenzar a utilizar Spark en sus tareas cotidianas de análisis de datos.

Fecha y hora: del 16 al 19 de julio en horario de mañana de 10:00h. a 14:00h.
Lugar: CESGA, Avda. de Vigo s/n - Campus Vida - Santiago de compostela.
Destinatarios: El taller está destinado a usuarios de la plataforma Big Data que deseen aprender a utilizar Spark 2.

+ INFO || REGISTRO

Notícia completa

CESGA

quarta-feira 19/06/2019 10:33

Nova: Reunión de trabajo del proyecto europeo Oceans. RA/VR para alfabetización marina.

El próximo día 20 de junio se reúne en el Cesga el consorcio del proyecto europeo OCEANS ("Ocean Connections: Developing Ocean Literacy through Creative Digital Pedagogies"), coordinado por la Universidad de Exeter (UK), y que cuenta con 8 socios europeos (universidadades, acuarios y escuelas) de Gran Bretaña, Dinamarca y España. Por la parte española / gallega, participa el Acuario Finisterrae (Concello da Coruña), y el CPI O Cruce. El Cesga tiene el papel de socio tecnológico del proyecto.

Este proyecto educativo Erasmus+ tiene el objetivo de explorar las potencialidades de las pedagogías creativas y herramientas de Realidad Virtual y Aumentada en la educación en ciencias, en concreto para reforzar la alfabetización marina.

El Cesga lidera el paquete tecnológico que propondrá y dará soporte a la experimentación con materiales y herramientas de Realidad Virtual y Mixta, teniendo en cuenta el contexto y posibilidades de desarrollo en el marco del proyecto piloto. Durante el mismo, se diseñarán y llevarán a cabo diversas actividades escolares en el aula y los tres acuarios participantes, que se analizarán para analizar el uso y potencialidades de estas pedagogías creativas y herramientas tecnológicas.

Notícia completa

CESGA

segunda-feira 20/05/2019 16:58

Nova: CESGA’s TRAFAIR project was awarded Forum Pa at Rome

The Trafair Project has been awarded at the Pa Forum in Rome today with the "Sustainable PA Award, 100 projects to achieve the objectives of the 2030 Agenda".

The project TRAFAIR - Understanding Traffic Flows to Improve Air Quality (https://www.cesga.es/en/investigacion/proyectos/Proyecto?id=736), co-funded by the European Community and in which CESGA participates, arose from the need of large cities to check air quality quickly and efficiently with a system that allows to take decisions that improve said quality benefiting citizens, businesses and administrations.

The objectives of this project are to provide estimates of air pollution in the city and to develop a prediction service based on the specific meteorology of the area and on the actual traffic flows that move through the city, in addition to publishing said data to the public.

These objectives are what have made TRAFAIR win the "Sustainable PA Award - 100 projects to achieve the objectives of the 2030 Agenda", initiative promoted by FPA in collaboration with ASVIS (Italian Alliance for Sustainable Development) in the event FORUM PA 2019.

Notícia completa

Cursos e eventos

quarta-feira 15/05/2019 10:42

Nova: Taller Big Data: Introducción a la plataforma Hadoop 3 del CESGA

El CESGA celebra el próximo 11 de junio, el Taller Big Data: Introducción a la plataforma Hadoop 3 del CESGA.

En este taller se hará una introducción a la nueva plataforma Big Data del CESGA. Esta plataforma ha sido actualizada a Hadoop 3 e incluye también la nueva versión de Spark 2.4. Además servirá de introducción a las herramientas disponibles dentro de la plataforma Hadoop 3. El taller también servirá de base para posteriores talleres sobre herramientas específicas incluidas en la plataforma como por ejemplo Spark.

El taller está destinado tanto a usuarios actuales de la plataforma Big Data como a nuevos usuarios que necesiten acceso a herramientas Big Data.

¿Qué aprenderé durante el taller?

Al final del taller sabrás:

  • Cómo conectarse a la plataforma Hadoop 3
  • Cómo transferir datos de forma eficiente
  • Las herramientas que están disponibles
  • Cómo lanzar estas herramientas

¿Qué NO se enseñará durante el taller?

Dado el carácter introductorio del taller y la gran variedad de herramientas disponibles, en este taller no se enseñará a utilizar cada una de las herramientas, sino que simplemente se mostrará como se puede acceder a ellas, sus principales funcionalidades y como se lanzan.

CONTENIDOS | REGISTRO CERRADO

Notícia completa

CESGA

terça-feira 14/05/2019 10:10

Nova: Plataforma Big Data actualizada a Hadoop 3 y con Spark 2.4

La plataforma Big Data ha sido actualizada a Hadoop 3, incluyendo también la nueva versión de Spark 2.4.

El servicio Big Data permite el procesado de grandes volúmenes de información en paralelo, así como la recogida de datos por streaming y la utilización de Jupyter Notebooks para tareas de exploración y visualización de datos.

El servicio está basado en la última versión de la distribución de Hadoop de Cloudera, CDH 6, basada en Hadoop 3 que ofrece una solución estable y que incluye numerosos componentes del ecosistema de Hadoop: YARN, HDFS, MapReduce, Spark, Flume,Hive, Impala, HBase, ...

La plataforma actualizada está accesible por SSH a través de **hadoop3.cesga.es**, mientras que la antigua basada en Hadoop 2 se seguirá accediendo a través de hadoop.cesga.es. Para facilitar la transición la plataforma antigua permanecerá activa hasta el próximo 30 de junio, momento en el que será apagada.

En la Guía de Uso hemos preparado una sección que indica como migrar los datos de HDFS:  http://bigdata.cesga.es/user-guide/migrating_data.html

No es necesario migrar los datos del HOME ya que los datos de la antigua plataforma han sido automáticamente migrados desde GlusterFS al nuevo HOME. Para más información sobre la plataforma incluyendo tutoriales para aprender a usar rápidamente las distintas herramientas le recomendamos acceder al portalespecífico de la plataforma:  https://bigdata.cesga.es

Este portal incluye un interfaz web (WebUI) que le permitirá hacer las tareas más habituales a través del navegador.

También le recomendamos consultar la nueva guía de usuario que hemos preparado: http://bigdata.cesga.es/user-guide

Notícia completa