Num tempo em que a inteligência artificial se alimenta de volumes de texto quase impossíveis de imaginar, uma equipa da Universidade de Princeton decidiu olhar para a forma mais antiga e natural de aprender uma língua: a de uma criança a crescer rodeada de vozes. Ao treinar modelos com gravações do quotidiano de bebés, durante cerca de mil dias, os investigadores procuraram perceber, ao mesmo tempo, como a linguagem nasce no ser humano e até onde uma máquina consegue acompanhar esse caminho. O resultado não replica a infância, mas sugere que aprender com menos pode ser, afinal, uma forma de ap
IA aprende milhares de palavras ao ouvir um bebé durante 1000 dias, segundo estudo de Princeton
A IA não aprende exatamente como um bebé
Porque é que este estudo chama a atenção? Já há IA que fala há anos.
Porque aprendeu de outra maneira. Em vez de milhões de textos, ouviu o dia a dia de bebés ao longo de cerca de 1000 dias, de forma gradual.
E o que fez a diferença nos resultados?
No início os resultados foram modestos. Melhoraram bastante quando a equipa introduziu a repetição de pequenos excertos de áudio, inspirada na consolidação da memória humana.
Convém ser preciso: o texto diz que melhorou significativamente, mas não dá números. Não sabemos quantas palavras, nem com que taxa de acerto.
Mas diz que reconheceu milhares de palavras.
Diz, sem concretizar quantas nem como foi medido. É um dado qualitativo. Também não sabemos quantas crianças foram gravadas.
Os investigadores admitem o limite principal: a IA não aprende como um bebé, que usa também gestos, visão e interação social.
Então o que se pode concluir?
Que é possível aprender com menos dados do que o habitual. Que isso torne os modelos mais eficientes na prática é uma possibilidade, não um resultado demonstrado.
Por isso o interesse está no caminho que abre, mais do que no ponto de chegada.
Il Polso
- Os modelos de IA habituais exigem quantidades gigantescas de texto, e esta experiência questiona essa dependência de frente.
- Os primeiros resultados saíram modestos, deixando a equipa perante um impasse que pedia outra abordagem.
- Um mecanismo de repetição de pequenos excertos de áudio, inspirado na memória humana, muda o rumo do treino.
- Ao fim de cerca de 1000 dias de aprendizagem, os sistemas já reconhecem milhares de palavras, começando pelos fonemas.
- A IA continua longe de aprender como um bebé, que também depende de imagens, gestos e interações sociais.
Num tempo em que a inteligência artificial se alimenta de volumes de texto quase impossíveis de imaginar, uma equipa da Universidade de Princeton decidiu olhar para a forma mais antiga e natural de aprender uma língua: a de uma criança a crescer rodeada de vozes. Ao treinar modelos com gravações do quotidiano de bebés, durante cerca de mil dias, os investigadores procuraram perceber, ao mesmo tempo, como a linguagem nasce no ser humano e até onde uma máquina consegue acompanhar esse caminho. O resultado não replica a infância, mas sugere que aprender com menos pode ser, afinal, uma forma de aprender melhor.
Uma equipa da Universidade de Princeton pegou em gravações do quotidiano de bebés, áudio e vídeo recolhidos em casa, e usou-as para ensinar modelos de inteligência artificial a falar. O período de referência foram os primeiros 1000 dias de vida de uma criança.
O objetivo era duplo: perceber como as crianças aprendem a linguagem e verificar se uma IA consegue reproduzir ao menos uma parte desse processo, partindo do mesmo material que um bebé ouve.
O método foge ao habitual. Em vez de milhões de textos, o sistema foi exposto, aos poucos, às conversas e sons do dia a dia, tal como uma criança os vai absorvendo. Os primeiros resultados foram modestos. A viragem chegou com a introdução de uma repetição de pequenos excertos de áudio, inspirada na forma como a memória humana consolida o que aprende.
A estratégia melhorou a aprendizagem de forma significativa. Os modelos começaram por reconhecer fonemas, as menores unidades do som da fala, e só depois passaram a identificar palavras. Ao fim de cerca de 1000 dias, já reconheciam milhares delas.
Os investigadores fazem questão de sublinhar que a IA não aprende exatamente como um bebé, que também recorre a imagens, gestos e interações sociais. Ainda assim, o trabalho mostra que é possível ensinar sistemas a aprender com muito menos informação. Fica por saber se esta abordagem chegará a dispensar os volumes gigantescos de dados de hoje.
Uma equipa da Universidade de Princeton pegou em gravações do quotidiano de bebés — áudio e vídeo recolhidos em ambientes familiares — e usou-as para treinar modelos de inteligência artificial a aprender linguagem. O período de referência foi o dos primeiros 1000 dias de vida das crianças.
O objetivo do estudo era duplo. Por um lado, perceber como é que as crianças aprendem a falar. Por outro, verificar se uma IA consegue reproduzir pelo menos uma parte desse processo, partindo do mesmo tipo de material a que um bebé está exposto.
O método afasta-se do habitual. Os modelos tradicionais de linguagem são treinados com quantidades enormes de texto. Neste caso, o sistema foi exposto de forma progressiva a conversas, sons e palavras do dia a dia, ou seja, ao que uma criança vai ouvindo à medida que cresce.
Os primeiros resultados ficaram aquém do desejado: foram modestos, segundo o relato do estudo. A viragem veio quando os investigadores introduziram um mecanismo de repetição de pequenos excertos de áudio, inspirado na forma como a memória humana consolida o que aprendeu.
A estratégia melhorou de forma significativa a aprendizagem. Os modelos começaram por reconhecer fonemas, as unidades mais pequenas do som da fala, e só depois evoluíram para a identificação de palavras. Ao fim de aproximadamente 1000 dias de aprendizagem, os sistemas já reconheciam milhares de palavras.
Os próprios investigadores fazem questão de sublinhar um limite: a IA não aprende exatamente como um bebé. As crianças não dependem só do que ouvem. Recorrem também a estímulos visuais, a gestos e a interações sociais para desenvolver a linguagem, e nada disso é replicado por inteiro nesta experiência.
Ainda assim, o trabalho mostra que é possível ensinar sistemas de IA a aprender com quantidades de informação mais limitadas do que as habituais. A investigação poderá contribuir para modelos mais eficientes, capazes de aprender de forma gradual, à semelhança do que acontece nos primeiros anos da vida humana. Fica por acompanhar se esta abordagem se traduz em sistemas que dispensem os volumes gigantescos de dados de hoje.
Citazioni salienti
A IA não aprende exatamente como um bebé, que usa também estímulos visuais, gestos e interações sociais.— Investigadores da Universidade de Princeton (paráfrase)