Ligar a Palestra do TOEFL à Palestra na Universidade

Falar é fundamental para o sucesso nos estudos universitários. Tanto estudantes de licenciatura como de pós-graduação utilizam a linguagem falada para lidar com uma variedade de tarefas dentro e fora do campus. Os estudantes de pós-graduação também frequentemente ensinam ou orientam estudantes de licenciatura ou trabalham em laboratórios de investigação colaborativa.

O TOEFL iBT atualizado apresenta duas tarefas de oração: Ouvir & Repetir e Fazer uma Entrevista. Ouvir e Repetir exige que os candidatos ouçam uma frase e a repitam com a maior precisão possível, enquanto a Entrevista Virtual envolve respostas abertas a uma série de perguntas relacionadas com a vida académica.

Recentemente, realizámos investigação sobre estas tarefas aqui na Universidade do Havai em Mānoa. Como docentes que ensinam, orientam e supervisionam estudantes internacionais, sabemos a importância das competências oratórias para o sucesso dos alunos. Como investigadores, estamos muito interessados em como as tarefas de teste, como as apresentadas nos exames TOEFL, se relacionam com as capacidades reais de expressão oral.

Os testes de língua são usados para tomar decisões sobre pessoas reais. Ao usar testes de línguas nas admissões no ensino superior, a principal preocupação é garantir que um estudante potencial será capaz de lidar com as exigências linguísticas do estudo em inglês. Assim, quando uma pontuação de teste é usada para tomar uma decisão de admissão, assumimos que a pontuação nos diz algo sobre quão bem um estudante será capaz de usar o inglês na universidade.

As pontuações dos testes baseiam-se no desempenho dos testes. Para falar ao oral, as performances dos alunos podem incluir atuações altamente limitadas, como tarefas de Ler em Voz Alta e Ouvir & Repetir, onde o que o aluno deve dizer é apresentado em forma escrita/auditiva, bem como atuações mais espontâneas e criativas, como respostas a perguntas na tarefa de Entrevista Virtual.

Para aumentar a confiança no que as pontuações dos testes nos dizem sobre capacidades no mundo real, examinar as qualidades do desempenho dos candidatos em tarefas e tarefas fora do teste tem valor. Essencialmente, queríamos saber que a fluência e precisão com que os alunos falam no teste é indicativa de quão fluente e precisa conseguem produzir linguagem na comunicação do mundo real.

Recrutámos 149 estudantes internacionais, todos utilizadores de inglês como segunda língua. Para garantir que representávamos a ampla gama de proficiências, incluímos estudantes que participavam em programas intensivos de inglês como segunda língua a tempo inteiro, estudantes que estavam inscritos simultaneamente em cursos universitários e cursos académicos de inglês, e estudantes de licenciatura e pós-graduação com matrícula completa.

Cada aluno realizou tarefas de expressão oral administradas na plataforma operacional de testes ETS. O ETS forneceu-nos as suas pontuações de expressão oral e gravações áudio. Também fizemos com que cada participante completasse duas tarefas académicas de oratória num ambiente presencial de laboratório. Estas tarefas envolviam (1) descrever um gráfico e (2) ouvir uma aula de 8 minutos sobre bilinguismo e depois responder a perguntas do investigador.

Os estudantes também foram convidados a gravar e submeter um trabalho de oratória relacionado com os seus programas académicos. Noventa e nove estudantes fizeram-no, sendo 65 apresentações formais.

Analisámos todas as amostras de fala quanto a uma variedade de características de complexidade, precisão e fluência relacionadas com gramática, vocabulário e pronúncia. Também avaliámos professores experientes de Inglês como segunda língua a eficácia comunicativa das amostras de fala não testadas.

Ao comparar as pontuações das tarefas dos indivíduos com as avaliações da fala das duas tarefas laboratoriais e da tarefa de fala baseada em cursos, encontrámos fortes correlações positivas (Tabela 1).

Tabela 1.

Correlações entre as pontuações de fala do TOEFL e as classificações de fala não relacionadas com testes.

Nota. Todas as correlações foram estatisticamente significativas ao nível p < 0,001.

Para as características linguísticas, os resultados foram mais complicados. Por um lado, algumas características linguísticas como a diversidade lexical (diversidade de uso do vocabulário) não eram relevantes para a tarefa Ouvir & Repetir, que apresentava respostas altamente restritas.

Algumas características linguísticas apresentavam fortes correlações positivas entre tarefas de fala no TOEFL e tarefas não testes, como as relacionadas com fluência e precisão da produção oral. Outras características linguísticas apresentavam correlações positivas pequenas a moderadas, como características de complexidade (por exemplo, o número de palavras ou orações por frase falada). Outras características tinham pouca associação entre tarefas.

Em suma, verificou-se que aspetos da produção da fala relacionados com a capacidade geral de processar o inglês, como fluência e precisão da gramática, vocabulário e pronúncia, estavam fortemente correlacionados entre desempenhos em testes e fora do teste. Aspetos da fala mais influenciados pelas exigências da tarefa, como a gramática e as escolhas de vocabulário, estavam menos fortemente correlacionados. 

A nossa investigação sugere fortemente que os estudantes que obtêm pontuações elevadas em tarefas como Ouvir & Repetir e Fazer uma Entrevista conseguem comunicar eficazmente fora do contexto de um teste. Esta conclusão valeu-se tanto para tarefas académicas simuladas em laboratório (Descrição em Grafos e Resposta à Aula) como para apresentações autênticas relacionadas com os cursos dos estudantes.

Enquanto a tarefa Fazer uma Entrevista, que apresenta uma produção linguística mais espontânea e criativa por parte dos candidatos, tendia a ter as correlações mais fortes com tarefas não relacionadas com o teste, a tarefa Ouvir & Repetir apresentava correlações igualmente fortes na maioria dos casos. Notavelmente, pareceu captar eficazmente os aspetos relacionados com fluência e precisão da capacidade de fala dos candidatos que estão em jogo em todos os contextos de fala.

No geral, verificámos que ambos os tipos de itens eram bons indicadores do desempenho dos alunos em tarefas simuladas e reais de expressão oral académica.

Daniel R. Isbell é Professor Associado no Departamento de Estudos de Segundas Línguas da Universidade do Havai em Mānoa, onde realiza investigação e leciona cursos focados em avaliação linguística.

Dustin Crowther é Professor Associado no Departamento de Estudos de Segundas Línguas da Universidade do Havai em Mānoa. Realiza investigação sobre a inteligibilidade da fala em segunda língua, com foco principal em Inglês Global.