Previsão do tempo de resposta de aplicações de big data em ambientes de nuvem
| dc.creator | Túlio B. M. Pinto | |
| dc.creator | Ana Paula Couto da Silva | |
| dc.creator | Jussara M. Almeida | |
| dc.date.accessioned | 2024-08-14T20:32:47Z | |
| dc.date.accessioned | 2025-09-09T01:30:19Z | |
| dc.date.available | 2024-08-14T20:32:47Z | |
| dc.date.issued | 2018 | |
| dc.description.abstract | Data access heterogeneity and irregularity are typical properties of Big Data applications, and, therefore, turn hardware and software resource scheduling much more challenging. However, the flexibility and elasticity provided by cloud environments decrease the difficulty by allowing on-demand resource provisioning. Nonetheless, the performance prediction (e.g.: response time) of such applications increase in complexity as all these characteristics are combined. This work explores an analytical model for Spark applications’ response time prediction, a popular platform for large-scale data processing, parametrized by earlier execution logs. This model is evaluated in several scenarios and applications. The results show relative errors lower than 8% for response time prediction, in average. | |
| dc.format.mimetype | ||
| dc.identifier.doi | https://doi.org/10.5753/sbrc.2018.2440 | |
| dc.identifier.issn | 2177-9384 | |
| dc.identifier.uri | https://hdl.handle.net/1843/74090 | |
| dc.language | por | |
| dc.publisher | Universidade Federal de Minas Gerais | |
| dc.relation.ispartof | Simpósio Brasileiro de Redes de Computadores e Sistemas Distribuídos (SBRC) | |
| dc.rights | Acesso Aberto | |
| dc.subject | Armazenamento | |
| dc.subject | Big data | |
| dc.subject | Computação em nuvem | |
| dc.title | Previsão do tempo de resposta de aplicações de big data em ambientes de nuvem | |
| dc.type | Artigo de evento | |
| local.citation.issue | 36 | |
| local.description.resumo | Aplicações de big data têm tipicamente propriedades bem específicas, tais como heterogeneidade e irregularidade nos padrões de acesso aos dados, que tornam a alocação de recursos de hardware e software muito desafiadora. Por outro lado, a flexibilidade e a elasticidade provida por plataformas de computação na nuvem facilitam esta alocaçãoá medida em que recursos são alocados sob demanda. Entretanto, estas características também tornam a previsão de desempenho (p.ex: tempo de resposta das aplicações) mais complexa. Este trabalho explora um modelo analítico para a previsão de tempo de resposta de aplicações executando na plataforma Spark, muito popular para processamento de dados em larga escala, que é parametrizado a partir de logs de execuções prévias. O modelo é avaliado em diversos cenários e aplicações, obtendo um erro relativo no tempo de resposta previsto inferior a 8%, em média. | |
| local.identifier.orcid | https://orcid.org/0000-0001-5951-3562 | |
| local.identifier.orcid | https://orcid.org/0000-0001-9142-2919 | |
| local.publisher.country | Brasil | |
| local.publisher.department | ICX - DEPARTAMENTO DE CIÊNCIA DA COMPUTAÇÃO | |
| local.publisher.initials | UFMG | |
| local.url.externa | https://sol.sbc.org.br/index.php/sbrc/article/view/2440 |