{"id":13188,"date":"2024-06-03T08:32:28","date_gmt":"2024-06-03T08:32:28","guid":{"rendered":"https:\/\/dei.fe.up.pt\/dev\/?p=13188"},"modified":"2024-06-04T11:49:50","modified_gmt":"2024-06-04T11:49:50","slug":"provas-de-doutoramento-em-media-digitais-computing-by-going-back-in-time-composing-video-sequences-through-multimodal-generative-coordination","status":"publish","type":"post","link":"https:\/\/dei.fe.up.pt\/dev\/provas-de-doutoramento-em-media-digitais-computing-by-going-back-in-time-composing-video-sequences-through-multimodal-generative-coordination\/","title":{"rendered":"Provas de Doutoramento em Media Digitais: ”Computing by going back in time: Composing video sequences through multimodal generative coordination”"},"content":{"rendered":"

Candidato:<\/strong>
\nLu\u00eds Henrique Pinto Arandas<\/p>\n

Data, Hora e Local:<\/strong>
\n03 de junho, \u00e0s 14:30,\u00a0na Sala de Atos da FEUP<\/p>\n

Presidente do J\u00fari:<\/strong>
\nDoutor Ant\u00f3nio Fernando Vasconcelos Cunha Castro Coelho, Professor Associado com Agrega\u00e7\u00e3o da Faculdade de Engenharia da Universidade do Porto.<\/p>\n

Vogais:
\n<\/strong>Doutora Lu\u00edsa Maria Lopes Ribas, Professora Auxiliar do Departamento de Design de Comunica\u00e7\u00e3o da Faculdade de Belas-Artes da Universidade de Lisboa;
\nDoutor David Fernandes Semedo, Professor Auxiliar do Departamento de Inform\u00e1tica da Faculdade de Ci\u00eancias e Tecnologia da Universidade Nova de Lisboa;
\nDoutor Andr\u00e9 Sier, Professor Auxiliar Convidado do Departamento de Artes Visuais e Design da Universidade de \u00c9vora;
\nDoutor Jos\u00e9 Miguel Santos Ara\u00fajo Carvalhais Fonseca, Professor Catedr\u00e1tico da Faculdade de Belas Artes da Universidade do Porto (Orientador);
\nDoutor Gilberto Bernardes de Almeida, Professor Auxiliar do Departamento de Engenharia Inform\u00e1tica da Faculdade de Engenharia da Universidade do Porto.<\/p>\n

A tese foi coorientada pelo Professor Doutor Mick Grierson<\/a>, Professor in Computing, and research leader at the Institute of Creative Computing at the University of the Arts, London.<\/em><\/p>\n

Resumo<\/strong>
\nEste projeto propo\u0303e um conjunto de me\u0301todos, inspirados na experie\u0302ncia humana de visa\u0303o e tempo, para desenvolver seque\u0302ncias de vi\u0301deo utilizando modelos generativos treinados. Os me\u0301todos destinam-se a\u0300 produc\u0327a\u0303o de seque\u0302ncias de vi\u0301deo com padro\u0303es derivados de modelos treinados, encontrados na literatura sobre metacriac\u0327a\u0303o e nas artes. Este projeto define possi\u0301veis futuros onde os modelos generativos podem ser reutilizados como ora\u0301culos em simulac\u0327o\u0303es que se centram na experie\u0302ncia humana de vi\u0301deo e imagens mentais; modelos que, devido a\u0300 forma como sa\u0303o treinados atrave\u0301s de arquivos e registos que representam o humano e o mundo fi\u0301sico, podem capturar os pro\u0301prios media e representar momentos especi\u0301ficos no tempo.<\/p>\n

Os resultados da investigac\u0327a\u0303o sa\u0303o em filme e instalac\u0327a\u0303o audiovisual, propondo como a intervenc\u0327a\u0303o e pra\u0301tica pode beneficiar da autorrefere\u0302ncia, utilizando modelos generativos como sintetizadores de vi\u0301deo, som e texto. Os me\u0301todos produzidos tomam partido da linguagem natural como guia e da modelac\u0327a\u0303o generativa em formas que podem ser entendidas como: amostragem, sequenciac\u0327a\u0303o e translac\u0327a\u0303o, a partir da literatura da computac\u0327a\u0303o e design de IA. Cada resultado pode ser entendido em domi\u0301nios maiores, como: 1) curtas-metragens a partir de texto, no filme Irreplaceable Biography<\/em>, 2) instalac\u0327o\u0303es discursivas a partir de datasets, na instalac\u0327a\u0303o Time as meaning<\/em>; e 3) curtas-metragens a partir de vi\u0301deo, no filme Man lost in the convergence of time <\/em>e na colaborac\u0327a\u0303o all YIN no YANG<\/em>. Esta investigac\u0327a\u0303o expande a pra\u0301tica generativa seguindo uma construc\u0327a\u0303o da linguagem na mente humana, no comportamento e na\u00a0experie\u0302ncia visual como inspirac\u0327a\u0303o para a experie\u0302ncia de vi\u0301deo. Estes projetos contribuem para uma compreensa\u0303o da direccionalidade e a representac\u0327a\u0303o do passado, utilizando sistemas de memo\u0301ria em rede que aprendem, e que sa\u0303o produzidos de acordo com estrutura encontrada na natureza e experie\u0302ncia humana.<\/p>\n

Palavras-chave<\/strong>: Composic\u0327a\u0303o de vi\u0301deo; Modelos generativos; Viagens no tempo; Experie\u0302ncia visual humana; Representac\u0327o\u0303es preditivas.<\/p>\n","protected":false},"excerpt":{"rendered":"

Candidato: Lu\u00eds Henrique Pinto Arandas Data, Hora e Local: 03 de junho, \u00e0s 14:30,\u00a0na Sala de Atos da FEUP Presidente do J\u00fari: Doutor Ant\u00f3nio Fernando Vasconcelos Cunha Castro Coelho, Professor Associado com Agrega\u00e7\u00e3o da Faculdade de Engenharia da Universidade do Porto. Vogais: Doutora Lu\u00edsa Maria Lopes Ribas, Professora Auxiliar do Departamento de Design de Comunica\u00e7\u00e3o […]<\/p>\n","protected":false},"author":60,"featured_media":13193,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"inline_featured_image":false,"footnotes":""},"categories":[46,22,20,116],"tags":[],"class_list":["post-13188","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-destaque","category-eventos","category-noticias","category-phd"],"_links":{"self":[{"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/posts\/13188","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/users\/60"}],"replies":[{"embeddable":true,"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/comments?post=13188"}],"version-history":[{"count":1,"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/posts\/13188\/revisions"}],"predecessor-version":[{"id":13189,"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/posts\/13188\/revisions\/13189"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/media\/13193"}],"wp:attachment":[{"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/media?parent=13188"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/categories?post=13188"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/dei.fe.up.pt\/dev\/wp-json\/wp\/v2\/tags?post=13188"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}