Já conhece o Albertina PT?

Primeiro grande modelo aberto de IA para a língua portuguesa

cérebro

O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou

Unsplash+ com Getty Images
António Branco
“Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina", diz António Branco
Fonte GICD DCI Ciências ULisboa

O primeiro grande modelo de Inteligência Artificial generativa para a língua portuguesa, para cada uma das variantes, do Brasil e de Portugal, gratuito, em código aberto e com acesso universal está disponível desde este mês e tem 900 milhões de parâmetros.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital."
António Branco

O Albertina PT destina-se a investigadores e organizações, públicas e privadas, grandes e pequenas, de todos os sectores económicos. No momento da sua publicação, o seu desempenho estabelece o estado da arte para o Português relativamente a modelos neuronais de linguagem publicados e abertos. É este tipo de modelos de linguagem que suportam toda a gama de aplicações de IA que estão a fazer furor, desde chatbots até tradução automática.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital", diz em comunicado de imprensa, António Branco, professor do Departamento de Informática da Ciências ULisboa, coordenador do NLX | Grupo da Fala e Linguagem Natural da Ciências ULisboa e coordenador da equipa deste projeto, desenvolvido em parceria com a Faculdade de Engenharia da Universidade do Porto (FEUP).

O Albertina PT é um codificador da família BERT, baseado na arquitetura neural Transformer e desenvolvido sobre o modelo DeBERTa.

Para António Branco, o Albertina “constitui um passo crucial para democratizar esta tecnologia, que deixa de estar confinada às bigtechs e aos laboratórios de investigação, e vê todo o seu potencial disponível para alavancar a criação de valor e a melhoria da vida das pessoas”.
O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou. “Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina, uma vez que cada um à sua maneira é mais apropriado para diferentes finalidades e condições de utilização”, acrescenta António Branco.

Os investigadores do NLX Ciências ULisboa - João Rodrigues, Luís Gomes, João Silva, António Branco e Rodrigo Santos - e os investigadores do Laboratório de Inteligência Artificial e Ciência de Computadores da FEUP - Henrique Lopes Cardoso e Tomás Osório - apresentam os resultados deste trabalho no artigo "Advancing Neural Encoding of Portuguese with Transformer Albertina PT*", submetido recentemente na arXiv.

“Este primeiro resultado e as reações que estamos a receber são muito encorajadores, e o balanço é muito positivo”, conclui António Branco.

O Albertina nos media
Expresso, Economia dia a dia, Human Resources, RTP, Correio da Manhã, Pplware Online.

Ana Subtil Simões, Gabinete de Jornalismo Ciências ULisboa
info.ciencias@ciencias.ulisboa.pt
Pormenor do cartaz do concurso “Belas-Artes Liga Mouraria”

Caue Sarabia, aluno da licenciatura em Tecnologias de Informação e Comunicação do Departamento de Informática de Ciências, a fazer um minor na Faculdade de Belas-Artes da Universidade de Lisboa, participou no concurso “Belas-Artes Liga Mouraria”, com o projeto Mudéjar, conjuntamente com mais três alunos daquela faculdade.

HisParc: Bringing physics to your neighbourhood

O projeto tem como objetivo envolver a sociedade no processo de investigação da área da Física, através da integração de detetores de raios cósmicos em universidades, escolas secundárias e museus.

Logotipos

A app teve origem no projeto QREN World Search, no qual participam Carlos Teixeira e Ana Luísa Respício, professores do Departamento de Informática da FCUL, bem como Ivo Madruga, ex. aluno do DI e Bernardo Santos, que é aluno do DI.

Imagem editada pelo DI

O projeto "Lusica - Artistas musicais lusófonos", desenvolvido pelos alunos de mestrado do Departamento de Informática de Ciências -  Carlos Barata, Farah Mussa, Gabriel Marques, Mónica Abreu e Rafael Oliveira - , no âmbito das di

Campus Solar de Ciências já tem uma página online! Quantos são os que passam todos os dias por ele e não sabem o que é?…

Energias renováveis

O Departamento de Engenharia Geográfica, Geofísica e Energia organiza a 27 de março, entre as 12h00 e as 13h00, na sala 8.2.47, no campus de Ciências, o seminário "Energias fósseis, o que temos e para onde vamos", proferido por Nuno Pimentel, docente do Departamento de Geologia de Ciências e investigador do Centro de Geologia da Universidade de Lisboa, desde 1989.

Ensino da Paleontologia: Novas abordagens

Candidaturas online abertas até 31 de Março!

No Dia do Patrono da Escola Secundária Stuart Carvalhais, Ciências participou nas atividades científicas da instituição com a presença de elementos dos Departamentos de Física e de Química e Bioquímica.

Pode a eficiência energética induzir práticas que levam a um aumento do consumo de energia por parte das famílias?

Henrique Costa

Henrique Regateiro Machado e Costa faleceu no passado dia 14 de Fevereiro.

Secção Autonoma de História e Filosofia das Ciências da FCUL

Hasok Chang, Prémio Fernando Gil

A RIGC – Rede de Informação da Indústria do Grande Consumo, empresa de consultores especializada na realização de trabalhos de consultoria n

Consulte as ofertas de emprego do Departamento de Estatística e Investigação Operacional.

A empresa Grupo Actuarial oferece estágios remunerados na área da Estatística/Probabilidades ou Matemática.

Para mais informações consultar:

RIGC – Rede de Informação da Indústria do Grande Consumo, empresa de consultores especializada na realização de trabalhos de consultoria na área de do Grande Consumo procura Analista de Dados Júnior(m/f).

Maksen é uma multinacional organizada em unidades de negócios, a fim de prestar serviços de consultoria em estratégia e redes de negócios, sistemas de informação, engenharia e comunicação e neste momento procura

Das 121 candidaturas admitidas para avaliação no âmbito do concurso para a criação do Rnie, somente 54 foram recomendadas a integrar o roteiro, dez delas incluem a presença de Ciências, sendo que cinco são lideradas por investigadores da faculdade.

Maria Helena Florêncio, Jorge Miguel Miranda, Henrique Cabral e António Branco apresentam infraestruturas de investigação de interesse estratégico para Portugal.

Gonçalo Costa Gomes Amaral

"Não se deve deixar que a sua memória seja esquecida, pois é através de tudo o que ele passou e viveu entre nós que vai continuar a viver e a iluminar tudo aquilo que fizermos", declararam em comunicado a AEFCL e o Conselho de Veteranos de Biologia.

A empresa Grupo Actuarial oferece estágios remunerados na área da Estatística/Probabilidades ou Matemática.

Mapa

A recomendação de inclusão da Clarin Portugal no Roteiro Nacional de Infraestruturas de Investigação de Interesse Estratégico (Rnie) representa um passo da maior importância para a internacionalização da língua portuguesa e para a sua preparação para a era digital. 

O Seminário Diagonal realiza-se dia 17 de março, pelas 18h00, na FCUL, no anfiteatro 6.2.53.

Henrique Cabral

Investigadores de seis universidades portuguesas criam novo centro de investigação em ciências marinhas: o Mare.

Candidaturas decorrem até 21 de março de 2014.

Páginas