Please use this identifier to cite or link to this item:
http://hdl.handle.net/1843/45142
Full metadata record
DC Field | Value | Language |
---|---|---|
dc.contributor.advisor1 | Douglas Guimarães Macharet | pt_BR |
dc.contributor.advisor1Lattes | http://lattes.cnpq.br/7640548709008824 | pt_BR |
dc.contributor.referee1 | Erickson Rangel do Nascimento | pt_BR |
dc.contributor.referee2 | William Robson Schwartz | pt_BR |
dc.contributor.referee3 | Sandra Eliza Fontes de Ávila | pt_BR |
dc.creator | Eduardo Vieira e Sousa | pt_BR |
dc.creator.Lattes | http://lattes.cnpq.br/0036531494047684 | pt_BR |
dc.date.accessioned | 2022-09-13T15:00:04Z | - |
dc.date.available | 2022-09-13T15:00:04Z | - |
dc.date.issued | 2021-07-29 | - |
dc.identifier.uri | http://hdl.handle.net/1843/45142 | - |
dc.description.abstract | As sociedades modernas são compostas por estruturas complexas que emergem das relações entre indivíduos, e a compreensão desses arranjos tem o potencial de se tornar uma ferramenta poderosa para sistemas inteligentes. Os métodos atuais de reconhecimento de relações sociais baseados em imagens isolam informações específicas da entrada com intuito de capturar aspectos essenciais que definem esses relacionamentos. No entanto, esta é uma abordagem imprecisa para analisar relações sociais, uma vez que a interação entre todas essas partes forma uma estrutura intrincada, sendo tão valiosa quanto as informações que cada componente carrega individualmente. Por esse motivo, é crucial capturar a estrutura social original para alcançar o raciocínio de alto nível necessário para identificar os relacionamentos de forma adequada. Neste trabalho, uma nova abordagem para interpretar métodos de reconhecimento de relacionamento social baseados em imagens é apresentada, considerando três escopos distintos de análise, denominados escalas sociais, relacionados a informações individuais, relativas e gerais. Além disso, também é avaliado como os dados dessas diferentes perspectivas sociais são combinados, levando em conta a capacidade de capturar dependências e restrições em múltiplas escalas. O Social Knowledge Graph (SKG) é proposto com base nas conclusões obtidas da análise conduzida, produzindo uma representação capaz de replicar a estrutura social da imagem de entrada. Essa representação única é explorada por meio da Social Graph Network (SGN), aplicando estratégias específicas de agregação de features, conforme as informações embutidas na estrutura do grafo. O desempenho do método proposto foi avaliado em benchmarks bem estabelecidos, alcançando um novo estado da arte. Finalmente, uma análise profunda da metodologia e dos conceitos por trás dela é conduzida, fornecendo uma visão sobre o processo de decisão do modelo proposto e obtendo resultados que suportam a nova interpretação dos métodos de reconhecimento de relações sociais. | pt_BR |
dc.description.resumo | Modern societies are composed of complex structures that emerge from the relationships between individuals, and the comprehension of these arrangements has the potential to become a powerful tool for intelligent systems. Current image-based social relation recognition methods isolate specific information from the input to capture essential aspects defining these relationships. However, this is an inaccurate approach for analyzing social relations, since the interaction between all these parts form an intricate structure, which is as valuable as the information each piece carries individually. For this reason, it is crucial to capture the original social structure to achieve the high-level reasoning required to identify relationships adequately. In this work, a novel approach to interpret image-based social relation recognition methods is presented, considering three distinct scopes named social scales, regarding individual, relative, and general information. Additionally, it also evaluates how the data from these different social perspectives is combined, taking into account the capacity of capturing multi-scale interdependencies and constraints. The Social Knowledge Graph (SKG) is proposed based on the conclusions obtained from the conducted analysis, producing a representation capable of replicating the original social structure from the input image. This unique representation is exploited with the Social Graph Network (SGN) by employing specific feature aggregation strategies according to the information embedded in the graph structure. The performance of the proposed method was evaluated in well-known benchmarks for social relation recognition, achieving a new state-of-the-art. Finally, a deep analysis of the methodology and the main concepts behind it is conducted, providing insight into the decision-making process of the proposed model and delivering results that support the new interpretation of social relationship recognition methods. | pt_BR |
dc.description.sponsorship | CAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível Superior | pt_BR |
dc.language | eng | pt_BR |
dc.publisher | Universidade Federal de Minas Gerais | pt_BR |
dc.publisher.country | Brasil | pt_BR |
dc.publisher.department | ICX - DEPARTAMENTO DE CIÊNCIA DA COMPUTAÇÃO | pt_BR |
dc.publisher.program | Programa de Pós-Graduação em Ciência da Computação | pt_BR |
dc.publisher.initials | UFMG | pt_BR |
dc.rights | Acesso Aberto | pt_BR |
dc.subject | Computer vision | pt_BR |
dc.subject | Pattern recognition | pt_BR |
dc.subject | Social relation recognition | pt_BR |
dc.subject | Deep learning | pt_BR |
dc.subject | Graph neural networks | pt_BR |
dc.subject.other | Computação – Teses | pt_BR |
dc.subject.other | Visão computacional – Teses | pt_BR |
dc.subject.other | Reconhecimento de padrões – Teses | pt_BR |
dc.subject.other | Aprendizado profundo – Teses | pt_BR |
dc.subject.other | Redes de relações sociais – Teses | pt_BR |
dc.subject.other | Redes neurais de grafos – Teses | pt_BR |
dc.title | Structure-aware multi-scale reasoning for image-based social relation recognition | pt_BR |
dc.title.alternative | Raciocínio estrutural multiescala para reconhecimento de relações sociais em imagens | pt_BR |
dc.type | Dissertação | pt_BR |
Appears in Collections: | Dissertações de Mestrado |
Files in This Item:
File | Description | Size | Format | |
---|---|---|---|---|
Structure-aware multi-scale reasoning for image-based social relation recognition.pdf | 72.76 MB | Adobe PDF | View/Open |
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.