O que é segmentação panóptica?
A segmentação panóptica atribui uma classe semântica a cada pixel e, ao mesmo tempo, distingue instâncias separadas de objetos contáveis. Ela combina a cobertura da segmentação semântica com a identificação em nível de instância.
Como funciona a segmentação panóptica
A segmentação panóptica produz uma interpretação sem sobreposições de uma cena, na qual cada pixel recebe uma categoria e os objetos elegíveis em primeiro plano também recebem identidades de instância. Regiões amorfas de “matéria”, como vias ou céu, precisam de cobertura por classe, mas não de uma identidade contável, enquanto classes de “objetos”, como pessoas, podem ser separadas em indivíduos. Uma etapa de fusão frequentemente concilia as predições semânticas e de instâncias no mapa final. A saída serve a fluxos de trabalho de compreensão de cenas e edição que precisam tanto de cobertura completa quanto de seleção em nível de objeto.
Informações essenciais
- Cada segmento de saída é normalmente representado por um identificador de categoria e, para classes contáveis, um identificador de instância vinculado a uma máscara de pixels.
- A qualidade panóptica combina o desempenho de reconhecimento e de sobreposição de máscaras, por isso penaliza segmentos ausentes ou espúrios, além da baixa correspondência espacial.
- Propostas de instâncias sobrepostas precisam ser resolvidas porque o resultado panóptico atribui um único segmento a cada pixel, ao contrário de máscaras de detecção independentes.
Quando a segmentação panóptica é importante
Escolha essa técnica quando um sistema precisar identificar tanto regiões contínuas, como o céu, quanto objetos individuais, como veículos. A saída mais rica geralmente exige mais anotações e processamento do que qualquer uma dessas tarefas isoladamente.