Dissertação

Automatic Annotation of Georeferenced Photos with Descriptive Keywords EVALUATED

Fotografias digitais são actualmente a experiência multimédia mais generalizada. Estas fotografias são frequentemente tiradas com aparelhos associados a um receptor GPS, como câmera fotográficas ou telemóveis, sendo assim possível associar coordenadas geográficas aos locais onde são tiradas. As mesmas fotografias são também frequentemente submetidas em repositórios online de partilha de fotografias, como o Flickr ou o Panoramio, e a associação de palavras-chave descritivas a estas fotografias, as chamadas tags, ajuda na sua organização e oferece suporte para procuras eficientes. No entanto, a anotação manual das fotografias também constitui um grande esforço por parte dos utilizadores. No contexto da minha tese de mestrado, proponho um método automático para a anotação de fotografias georeferenciadas com tags descritivas, explorando as anotações disponíveis em repositórios online de fotografias georeferenciadas. Mais especificamente, usando as coordenadas geográficas associadas à fotografia que pretendemos anotar, podemos começar por recolher fotografias de um repositório online que foram tiradas em localizações próximas. A seguir, e para cada tag distinta associada às fotografias próximas, podemos calcular um conjunto de estimadores de relevância com base em factores como a frequência da tag, a proximidade geospatial das fotografias, a similaridade visual das imagens, e o número de diferentes utilizadores que usam a tag. Os vários estimadores podem ser combinados através de métodos supervisionados de learning to rank, ou através de métodos não supervisionados de agregação de rankings. As tags mais relevantes são finalmente sugeridas ao utilizador. Resultados experimentais usando uma colecção de fotografias recolhidas do Flickr atestam da adequação da abordagem proposta.
Anotação de Fotografias, Recomendação de Tags, Recuperação de Informação Geográfica, Algoritmos não Supervisionados, Algoritmos Supervisionados

junho 1, 2012, 13:0

Documentos da dissertação ainda não disponíveis publicamente

Orientação

CO-ORIENTADOR

Pável Pereira Calado

Departamento de Engenharia Informática (DEI)

Professor Auxiliar

ORIENTADOR

Bruno Emanuel Da Graça Martins

Departamento de Engenharia Informática (DEI)

Professor Auxiliar