CHAMADA / CALL FOR PAPERS (abril-2025) - Multimodalidade: abordagens cognitivas e representações computacionais

2024-09-23

 

Special issue publication: April 2025

 

Multimodalidade: abordagens cognitivas e representações computacionais

Editores convidados:

Tiago Timponi Torrent (UFJF) – tiago.torrent@ufjf.br

André V. Lopes Coneglian (UFMG) – coneglian@ufmg.br

A pesquisa em multimodalidade pode ser caracterizada, muito amplamente, pelo interesse em determinar mecanismos e efeitos da combinação de diversas formas comunicativas a serviço da construção do significado (cf. Bateman et al., 2017). Essa caracterização bastante abrangente favorece o desenvolvimento de pesquisas sobre multimodalidade no âmbito de abordagens que privilegiam a centralidade do significado na análise linguística, como é o caso de abordagens cognitivistas. Se tradicionalmente os estudos da linguagem humana centraram-se exclusivamente na modalidade verbal, a abertura para a consideração de manifestações linguísticas multimodais põe em xeque um conjunto de assunções básicas sobre a natureza da linguagem, sobre os mecanismos de construções do significado e sobre a integração de diferentes modalidades (visual, verbal, etc.) nas atividades comunicativas humanas (cf. Cohn e Schilperoord, 2024). Para além dessas questões teóricas, deve-se considerar, também, que a pesquisa em multimodalidade tem ganhado força no campo das ciências da computação e da linguística computacional, com vistas ao desenvolvimento de recursos linguísticos para o treinamento de modelos de língua, entre outras finalidades.

Nesse contexto, este Dossiê busca reunir artigos que discutam a multimodalidade tanto do ponto de vista de abordagens cognitivistas quanto do ponto de vista de aplicações computacionais, relacionada às línguas românicas. As submissões de artigos para o Dossiê podem ser feitas em três linhas temáticas:

1.⁠ ⁠Abordagens cognitivistas para a multimodalidade

1.a.  Comunicação multimodal

1.b. Gêneros multimodais

1.c. Semântica de frames e multimodalidade

1.d. Construções gramaticais em textos multimodais

2.⁠ ⁠⁠Representações semântico-computacionais para a multimodalidade

2.a. Construção e avaliação de datasets multimodais.

2.b. Aplicações computacionais para desenvolvimento de recursos para legendagem, audiodescrição, entre outros.

  1. Modelos de Inteligência Artificial para Rotulação Semântica de Imagens

3.a. Modelos para rotulação de imagens estáticas.

3.b. Modelos para rotulação de imagens dinâmicas.

Os trabalhos a serem submetidos para a linha temática 3 poderão utilizar, no treinamento dos modelos, os datasets multimodais já produzidos e disponibilizados pela ReINVenTA – Research and Innovation Network for Video and Text Analysis of Multimodal Objects. Os datasets podem ser acessados em https://huggingface.co/FrameNetBrasil.

Os autores devem preparar seus manuscritos seguindo as diretrizes do periódico e enviar seus textos por meio do sistema de submissão on-line: https://periodicos-hml.cecom.ufmg.br/index.php/caligrama/about/submissions

Data-limite das submissões: 31 de janeiro de 2025

Publicação do dossiê: abril de 2025