polito.it
Politecnico di Torino (logo)

I-REACT, un sistema affidabile, efficiente e scalabile per l'analisi di Big Data geospaziali = I-REACT, a reliable, efficient and scalable system for the analysis of geospatial Big Data

Alessia Botto

I-REACT, un sistema affidabile, efficiente e scalabile per l'analisi di Big Data geospaziali = I-REACT, a reliable, efficient and scalable system for the analysis of geospatial Big Data.

Rel. Paolo Garza. Politecnico di Torino, Corso di laurea magistrale in Ingegneria Informatica (Computer Engineering), 2018

Abstract:

Analisi di Big Data geospaziali con framework Spark L'obiettivo principale di questa tesi è lo sviluppo di un sistema completo, affidabile, efficiente, robusto e scalabile per l'analisi dei BigData geospaziali relativi ad I-React, un progetto presentato nel 2016 all'interno dell'agenda Horizon 2020 e finanziato dall'Unione Europea al fine di creare un'architettura indipendente per la riduzione del rischio di catastrofi dovute a eventi climatici disastrosi. Il lavoro qui esposto si può intendere diviso in due sezioni: una è relativa all'interfacciamento con il ServiceBus di Microsoft Azure mentre l'altra riguarda la gestione dei singoli task. Nella prima parte, sono stati sviluppati sia il sistema di messaggistica sia il server che, ricevuta una request dal back-end dell'applicazione, è in grado di lanciare un job Spark e di rispondere ritornando l'oggetto restituito dal job stesso. Nella seconda, invece, ci si occupa dello sviluppo del job Spark (con i metodi e le classi di utiltà), che, ricevuti in input gli argomenti necessari, esegue le query sull'hdfs e ritorna l'URL della risorsa in output (RDD filtrato).

Relators: Paolo Garza
Academic year: 2018/19
Publication type: Electronic
Number of Pages: 134
Additional Information: Tesi secretata. Full text non presente
Subjects:
Corso di laurea: Corso di laurea magistrale in Ingegneria Informatica (Computer Engineering)
Classe di laurea: New organization > Master science > LM-32 - COMPUTER SYSTEMS ENGINEERING
Aziende collaboratrici: UNSPECIFIED
URI: http://webthesis.biblio.polito.it/id/eprint/8336
Modify record (reserved for operators) Modify record (reserved for operators)