Professor Jeremy Bailenson é um líder em pesquisa de realidade virtual (VR) e o diretor fundador do Virtual Human Interaction Lab da Universidade de Stanford. O seu curso Virtual People, lecionado há mais de 20 anos, examina o impacto das tecnologias imersivas na interação humana.
"I have been teaching about VR for over 20 years. While many students in my courses are experts at programming, very few know are skilled 3D modelers. Meshy was transformational in my class, allowing everyone to quickly build complex, low-polygon models to populate their VR worlds in minutes."
Jeremy Bailenson
Professor, Stanford University
Ao introduzir o Meshy na aula, ele melhorou as capacidades criativas dos alunos, permitindo que 190 participantes criassem modelos 3D diretamente dos seus portáteis ou tablets. Nesta entrevista, o Professor Jeremy Bailenson e Portial Wang partilham a sua experiência e perceções sobre o uso do Meshy na aula Virtual People.
O que o motivou a usar o Meshy na aula Virtual People, especialmente para este projeto de grande escala?
Estávamos entusiasmados em usar o Meshy pela sua ferramenta de texto-para-3D para ajudar os alunos a criar réplicas virtuais de espaços físicos em VR.
Ter contas empresariais permitiu-nos facilitar uma atividade em sala de aula com 190 alunos, onde puderam trabalhar colaborativamente em grupos ao mesmo tempo.
Também estávamos entusiasmados com a capacidade da ferramenta de controlar a contagem de polígonos, pois renderizar modelos grandes e complexos em VR social é dispendioso e deteriora as experiências imersivas dos alunos.
Como os alunos reagiram ao usar o Meshy para gerar modelos 3D?
Os alunos estiveram incrivelmente envolvidos durante a nossa palestra sobre IA generativa.
Trabalhando com base em referências de fotos 360, em grupos de cerca de 10 alunos, decidiram quais objetos queriam usar em VR, e usaram a ferramenta e iteraram nos meshes e texturas.
Ficámos muito impressionados com a texturização em objetos como brinquedos de pelúcia e tapetes, bem como com a forma como a ferramenta conseguiu lidar bem com objetos não convexos, como vasos de flores e tabuleiros de cornhole.
Uma abordagem interessante que alguns alunos adotaram foi tirar capturas de ecrã de objetos na foto 360, alimentá-las no ChatGPT para descrever os objetos e usar as respostas para ajudar a guiar os seus prompts no Meshy.
Mencionou estar impressionado com a qualidade dos modelos. Pode elaborar sobre o que se destacou?
Ficámos entusiasmados ao ver os alunos criarem modelos complexos, como raquetes de ténis e tendas, que se assemelhavam muito aos objetos físicos em termos de texturas e formas.
Os modelos também foram criados com uma contagem de polígonos suficientemente baixa, de modo que o processo de importação e renderização dos modelos em VR foi suave para os alunos em VR social em rede.
Como vê ferramentas como o Meshy a influenciar futuros projetos de educação e pesquisa em VR?
Ferramentas como o Meshy reduzem a barreira para indivíduos sem formação formal em modelagem 3D gerarem objetos que podem ser usados diretamente em ambientes virtuais.
Na nossa aula, isso permitiu que os alunos construíssem colaborativamente réplicas virtuais de espaços físicos e revivessem experiências presenciais partilhadas em VR. Com esses ambientes detalhados, a nossa equipa de pesquisa tem conseguido estudar as experiências de VR dos alunos, particularmente como as experiências imersivas influenciaram a perceção dos alunos sobre os outros, dinâmicas sociais e a recordação de memória.
No espaço educacional, vemos a capacidade de criar objetos 3D altamente personalizáveis e mundos virtuais personalizáveis a capacitar alunos e professores em salas de aula imersivas. Da mesma forma, na pesquisa, ferramentas como o Meshy permitem estudos mais extensos sobre tópicos como criatividade, recordação de memória e interação social, permitindo que os investigadores explorem o impacto da VR nesses tópicos de maneiras mais ricas e nuançadas.
Que conselho daria a outros educadores que procuram integrar a IA no seu currículo, mas que podem não saber por onde começar?
Identifique desde cedo os componentes do currículo e da agenda de ensino que podem beneficiar mais da integração da IA. Desenhe e itere sobre os componentes relacionados com a IA, e coordene com a equipa de apoio para resolução de problemas, se possível. Finalmente, como educadores, abracem momentos inesperados e adaptem-se rapidamente a desafios imprevistos.