Please use this identifier to cite or link to this item:
http://hdl.handle.net/1843/73811| Type: | Artigo de Evento |
| Title: | Extensão de um ambiente de computação de alto desempenho para o processamento de dados massivos |
| Other Titles: | Extending a high-performance computing environment for processing massive data |
| Authors: | Lucas Miguel Simões Ponce Walter Dos Santos Filho Wagner Meira Junior Dorgival Olavo Guedes Neto |
| Abstract: | A computacao de alto desempenho (HPC) e o processamento de da- dos massivos (Big Data) sao duas tendencias em sistemas de computacao que estao comecando a convergir. Este trabalho apresenta nossa experiencia nesse caminho de convergencia, estendendo o COMP Superscalar (COMPSs), um mo- delo de programacao paralela e distribuıda ja conhecido no mundo de HPC, para o processamento de dados massivos. Para isso, ele foi integrado ao HDFS, sistema de arquivos distribuıdo mais usado para Big Data, e ao Lemonade, uma ferramenta de analise e mineracao de dados desenvolvida na UFMG. Os resultados mostram que a integracao com o HDFS beneficia o COMPSs pela abstracao de dados fornecida e a integracao com o Lemonade facilita sua utilizacao e popularizacao na ́area de Ciencia dos Dados. |
| Abstract: | High performance computing (HPC) and massive data processing (Big Data) are two trends in computing systems that are beginning to con- verge. This paper presents our experience on this path of convergence, exten- ding COMP Superscalar (COMPSs), a parallel and distributed programming model already known in the world of HPC, for the processing of massive data. For this, it has been integrated to HDFS, the most widely used distributed file system for Big Data, and to Lemonade, a data mining and analysis tool deve- loped at UFMG. The results show that the integration with HDFS benefits the COMPSs by the data abstraction provided and the integration with Lemonade facilitates its use and popularization in the area of Data Science. |
| Subject: | Processamento Eletrônico de Dados Mineração de dados (Computação) |
| language: | por |
| metadata.dc.publisher.country: | Brasil |
| Publisher: | Universidade Federal de Minas Gerais |
| Publisher Initials: | UFMG |
| metadata.dc.publisher.department: | ICX - DEPARTAMENTO DE CIÊNCIA DA COMPUTAÇÃO |
| Rights: | Acesso Aberto |
| metadata.dc.identifier.doi: | https://doi.org/10.5753/sbrc.2018.2486 |
| URI: | http://hdl.handle.net/1843/73811 |
| Issue Date: | 2018 |
| metadata.dc.url.externa: | https://sol.sbc.org.br/index.php/sbrc/article/view/2486 |
| metadata.dc.relation.ispartof: | Simposio Brasileiro de Redes de Computadores |
| Appears in Collections: | Artigo de Evento |
Files in This Item:
| File | Description | Size | Format | |
|---|---|---|---|---|
| Extens ̃ao de um ambiente de computac ̧ ̃ao.pdfA.pdf | 477.07 kB | Adobe PDF | View/Open |
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.