Já conhece o Albertina PT?

Primeiro grande modelo aberto de IA para a língua portuguesa

cérebro

O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou

Unsplash+ com Getty Images
António Branco
“Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina", diz António Branco
Fonte GICD DCI Ciências ULisboa

O primeiro grande modelo de Inteligência Artificial generativa para a língua portuguesa, para cada uma das variantes, do Brasil e de Portugal, gratuito, em código aberto e com acesso universal está disponível desde este mês e tem 900 milhões de parâmetros.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital."
António Branco

O Albertina PT destina-se a investigadores e organizações, públicas e privadas, grandes e pequenas, de todos os sectores económicos. No momento da sua publicação, o seu desempenho estabelece o estado da arte para o Português relativamente a modelos neuronais de linguagem publicados e abertos. É este tipo de modelos de linguagem que suportam toda a gama de aplicações de IA que estão a fazer furor, desde chatbots até tradução automática.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital", diz em comunicado de imprensa, António Branco, professor do Departamento de Informática da Ciências ULisboa, coordenador do NLX | Grupo da Fala e Linguagem Natural da Ciências ULisboa e coordenador da equipa deste projeto, desenvolvido em parceria com a Faculdade de Engenharia da Universidade do Porto (FEUP).

O Albertina PT é um codificador da família BERT, baseado na arquitetura neural Transformer e desenvolvido sobre o modelo DeBERTa.

Para António Branco, o Albertina “constitui um passo crucial para democratizar esta tecnologia, que deixa de estar confinada às bigtechs e aos laboratórios de investigação, e vê todo o seu potencial disponível para alavancar a criação de valor e a melhoria da vida das pessoas”.
O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou. “Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina, uma vez que cada um à sua maneira é mais apropriado para diferentes finalidades e condições de utilização”, acrescenta António Branco.

Os investigadores do NLX Ciências ULisboa - João Rodrigues, Luís Gomes, João Silva, António Branco e Rodrigo Santos - e os investigadores do Laboratório de Inteligência Artificial e Ciência de Computadores da FEUP - Henrique Lopes Cardoso e Tomás Osório - apresentam os resultados deste trabalho no artigo "Advancing Neural Encoding of Portuguese with Transformer Albertina PT*", submetido recentemente na arXiv.

“Este primeiro resultado e as reações que estamos a receber são muito encorajadores, e o balanço é muito positivo”, conclui António Branco.

O Albertina nos media
Expresso, Economia dia a dia, Human Resources, RTP, Correio da Manhã, Pplware Online.

Ana Subtil Simões, Gabinete de Jornalismo Ciências ULisboa
info.ciencias@ciencias.ulisboa.pt
Programa de Estímulo à Investigação

O Instituto Dom Luiz e o Centro de Matemática e Aplicações Fundamentais acolhem os projetos dos dois alunos de Ciências galardoados pelo programa.

No âmbito das atividades do Centro de Investigação Operacional, decorre no Instituto Superior de Agronomia, Edf. Principal, Sala 27, em 29/11/2014, o 3º Workshop em Bio-Optimização.

No âmbito das atividades do Centro de Investigação Operacional, decorre em 29/11/2014, no Instituto Superior de Agronomia, Edf. Principal, Sala 27, o 3º Workshop em BIO-OPTIMIZAÇÃO.

Em CIÊNCIAS, atrair os melhores estudantes é uma prioridade.

Queremos reconhecer, estimular e valorizar a dedicação e o esforço dos nossos estudantes.

A Mercer líder global em serviços de consultoria nas áreas de capital humano, benefícios, pensões e investimentos pretende recrutar 5 novos estagiários.
O perfil procurado é o seguinte:

Instituto de Astrofísica e Ciências do Espaço

Durante o mês de novembro as redes sociais divulgam diariamente informação sobre o novo instituto e o seu papel científico e tecnológico, tanto a nível nacional como internacional.

Capa do livro

Thibault Langlois, professor no Departamento de Informática da Faculdade de Ciências da ULisboa, publicou recentemente um livro em português sobre compiladores, em coautoria com Pedro Reis Santos, professor no Instituto Superior Técnico.

Ricardo Eleutério

O projeto de Ricardo Eleutério, aluno da Universidade Nova de Lisboa (UNL), orientado por Raquel Conceição, professora cientista da Faculdade de Ciências da ULisboa, tem um enorme potencial na deteção precoce de metástases na axila.

fixURself

“Acredito que cursos como este [MIEBB], ensinados por professores com esta qualidade, preparam melhor os alunos para experiências como a deste concurso e, desta forma, para o futuro”, declarou Inês Santos, aluna do mestrado integrado em Engenharia Biomédica e Biofísica de Ciências.

A Matemática da ULisboa encontra-se em 14º lugar no ranking das melhores universidades europeias e em 58º lugar a nível mundial segundo o ranking U.S.

A plataforma moodle arquivo estará em manutenção (não sendo possível aceder à mesma) a partir das 14h00 de dia 3 de novembro até ao final de quarta-feira, dia 5 de

Food & Nutrition Awards

Equipa composta por investigadores do Centro de Química e Bioquímica da Faculdade de Ciências foi distinguida com a 2.ª Menção Honrosa, na categoria de Investigação e Desenvolvimento, da 5.ª edição do “Food & Nutrition Awards”.

A reunião geológico-cultural da Geologists Association aconteceu este ano em Portugal.

Parabéns a ALEXANDRE ANAHORY DE SENA SIMÕES, aluno do Mestrado em Matemática, pela atribuição do prémio do Programa Estímulo à Investigação 2014 na área da Matemática, com o trabalho "Métodos topol&oac

Em 2014 a European Molecular Biology Organization (EMBO) celebra 50 anos. Em entrevista, Margarida Amaral comenta a sua eleição, explica quais são as funções dos membros da EMBO e deixa mensagens a governantes, dirigentes universitários e alunos de ciências.

A sessão de entrega dos prémios realiza-se a 21 de novembro.

O Southwestern European Regional Programming Contest (SWERC) 2014 ocorre a 22 e 23 de novembro de 2014, na Faculdade de Ciências da Universidade do Porto.

O foco da plataforma Food & Nutrition Awards é “Inovar para Crescer”.

Campus de Ciências

Para um padrão de consumo doméstico típico, um sistema fotovoltaico não é economicamente viável, exceto talvez para muito baixas potências instaladas.

Queres potenciar a tua energia para entrares no mercado de trabalho?

Trainees 2015 - InterCement

A INTERCEMENT está a dar início ao Programa de Trainees Internacional - 2015.

A Liga para a Protecção da Natureza encontra-se a recrutar formadores que estejam capacitados para ministrar cursos que se enquadrem nas seguintes áreas de formação:

Dados demonstram que as pessoas ficam presas no trânsito cerca de 34 horas todos os anos e gastam 1.9 mil milhões de litros de combustível.

José Sebastião e Silva

A Universidade de Lisboa comemora o centenário do nascimento de José Sebastião e Silva organizando diversos eventos, alguns em parceria com outras instituições, durante o ano letivo de 2014/2015.

A Procter & Gamble (P&G) promove, no próximo dia 23 de outubro (manhã), o evento online OneDayWith P&G.

Páginas