Mudanças comportamentais e interação multimodal dentro de um espaço performativo: uma investigação interdisciplinar

• Processo: 16/22619-0
• Modalidade de apoio: Bolsas no Brasil - Pós-Doutorado
• Data de Início da vigência: 01 de fevereiro de 2019
• Data de Término da vigência: 15 de janeiro de 2025
• Área de conhecimento: Linguística, Letras e Artes - Artes - Música
• Pesquisador responsável: Gabriela Castellano
• Beneficiário: Elena Partesotti
• Instituição Sede: Núcleo Interdisciplinar de Comunicação Sonora (NICS). Universidade Estadual de Campinas (UNICAMP). Campinas , SP, Brasil
• Vinculado ao auxílio: 13/07559-3 - Instituto Brasileiro de Neurociência e Neurotecnologia - BRAINN, AP.CEPID
• Assunto(s): Cérebro Mídia digital Tecnologia musical Cognição musical Reabilitação do acidente vascular cerebral
• Palavra(s)-Chave do Pesquisador: audiovisual-motor learning | Brain | cognition and music | Cross-modal encoding | digital musical technology | Neurotechnology | rehabilitative tools | Digital Musical Technology for auditory-motor rehabilitation

Resumo

O presente projeto visa fornecer uma nova contribuição e novos conhecimentos na área de aprendizado motor por meio do uso de tecnologia interativa musical e multimodal. O estudo proposto investigará como o aprendizado áudio-visual-motor gera e reforça novos mapas sensório-motores baseado em codificação crossmodal, de modo a testar, em indivíduos sadios, a eficácia do protótipo e-mocomu, desenvolvido no Núcleo Interdisciplinar de Comunicação Sonora (NICS), em 2013. Este projeto deriva da minha pesquisa de doutorado, recentemente concluída, a qual baseou-se no paradigma da cognição incorporada (teorizada por Johnson, 1980), na Teoria da Contingência Sensório-motora (O'Regan & Noe, 2011), na Teoria da Percepção Visual (Gibson, 1979) e na interação humano-computador. Todos esses aspectos foram elencados com o objetivo de estudar o modo como sujeitos envolvem-se num ambiente interativo, a partir do pressuposto de que as suas ações são mediadas por suas percepções. Dentro do escopo desta proposta, uma das tarefas primordiais será dar continuidade ao desenvolvimento do "Laboratório de Mídia Interativa para Imersão Digital e Cognição Aumentada" (ImCognita), implementado no âmbito do projeto "Criação e Análise musicais a partir do estudo de processos cognitivos com suporte de Mídia Interativa e Imersão digital", financiado pelo CNPq, processo nº. 470358/2014-9. Para desenvolver ainda mais as tarefas da presente proposta, iremos colaborar com o CEPID da FAPESP Instituto Brasileiro de Neurociência e Neurotecnologia (BRAINN), UNICAMP, processo nº. 2013/07559-3. Mais adiante, este projeto propõe considerar a inclusão de pacientes com Acidente Vascular Cerebral (AVC) para testar a memorização auditivo-motora que ocorre durante o processo de reabilitação em pessoas com AVC. (AU)

Publicações científicas

(4)

(Referências obtidas automaticamente do Web of Science e do SciELO, por meio da informação sobre o financiamento pela FAPESP e o número do processo correspondente, incluída na publicação pelos autores)

PARTESOTTI, ELENA; CASTELLANO, GABRIELA; MANZOLLI, JONATAS. Exploring the Theoretical Landscape of BehCreative: Artistic and Therapeutic Possibilities of an Extended Digital Musical Instrument. ARTSIT, INTERACTIVITY AND GAME CREATION, PT 1, ARTSIT 2023, v. 564, p. 13-pg., 2024-01-01. (13/07559-3, 16/22619-0)

PARTESOTTI, ELENA; CASTELLANO, GABRIELA; MANZOLLI, JONATAS. Preliminary Findings from BehCreative: Exploring the Potential of Extended Digital Music Instruments for Music Therapy and Rehabilitation. ARTSIT, INTERACTIVITY AND GAME CREATION, PT 1, ARTSIT 2023, v. 564, p. 14-pg., 2024-01-01. (13/07559-3, 16/22619-0)

HEBLING, EDUARDO D.; PARTESOTTI, ELENA; SANTANA, CHARLES P.; FIGUEIREDO, ANDRE; DEZOTTI, CASSIO G.; BOTECHIA, TALES; DA SILVA, CESAR A. PEREIRA; DA SILVA, MICAEL A.; ROSSETTI, DANILO; DE OLIVEIRA, VICTOR A. W.; et al. MovieScape: Audiovisual Landscapes for Silent Movie. PROCEEDINGS OF THE 9TH INTERNATIONAL CONFERENCE ON DIGITAL AND INTERACTIVE ARTS (ARTECH 2019), v. N/A, p. 7-pg., 2019-01-01. (16/22619-0)

PARTESOTTI, ELENA. Technology as a Means of Musical and Artistic Expression: A Comparative Study of Nono's Prometheus and Pink Floyd's Concert in Venice in the 1980s. ARTSIT, INTERACTIVITY AND GAME CREATION, PT 2, ARTSIT 2023, v. 565, p. 17-pg., 2024-01-01. (16/22619-0)