14 jul 2021
14:00 Defesa de Doutorado Integralmente a distância
Tema
Utilizando conceitos de alto-nível, e características visuais e auditivas para detecção de violência em vídeos
Aluno
Bruno Malveira Peixoto
Orientador / Docente
Orientador: Anderson de Rezende Rocha / Coorientador: Zanoni Dias
Breve resumo
Ao detectar mídias sensíveis, violência é uma das mais difíceis de se definir objetivamente, e por isso, um desafio significante quando se trata de detectar automaticamente. Enquanto muitos estudos foram conduzidos para detectar aspectos de violência, poucos tentam solucionar o conceito de forma mais geral. Neste trabalho, é proposto um método que tem por objetivo habilitar uma máquina a entender o conceito de alto-nível de violência. Isso é feito a princípio dividindo o conceito em outros mais simples e objetivos, como lutas, explosões, sangue e tiros para depois combiná-los, levando a um melhor entendimento da cena. Para isso, as características individuais de cada sub-conceito são levadas em consideração para guiar a forma como elas devem ser descritas, usando redes neurais convolucionais específicas para obter tais características. Por exemplo, uma cena de luta deve incorporar características temporais que uma cena com sangue não precisa. Uma cena com explosões ou tiros deve levar características auditivas mais em consideração. Com essa solução multimodal, detectores de características visuais e auditivas são treinados separadamente e depois combinados em uma rede neural de decisão que compõe um detector de violência que considera diferentes aspectos do problema. Essa solução robusta e modular permite que diferentes pessoas e culturas adaptem o detector para suas necessidades específicas. Resultados experimentais obtidos em datasets padrões mostram importantes avanços em relação ao estado da arte.
Banca examinadora
Titulares:
| Anderson de Rezende Rocha | IC/UNICAMP |
| Tiago Fernandes Tavare | FEEC/UNICAMP |
| Jacques Wainer | IC/UNICAMP |
| Luca Bondi | Bosch |
| Flávio Elias Gomes de Deus | ENE/UNB |
Suplentes:
| David Menotti Gomes | DINF/UFPR |
| Esther Luna Colombini | IC/UNICAMP |
| Moacir Antonelli Ponti | ICMC/USP |