Já conhece o Albertina PT?

Primeiro grande modelo aberto de IA para a língua portuguesa

cérebro

O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou

Unsplash+ com Getty Images
António Branco
“Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina", diz António Branco
Fonte GICD DCI Ciências ULisboa

O primeiro grande modelo de Inteligência Artificial generativa para a língua portuguesa, para cada uma das variantes, do Brasil e de Portugal, gratuito, em código aberto e com acesso universal está disponível desde este mês e tem 900 milhões de parâmetros.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital."
António Branco

O Albertina PT destina-se a investigadores e organizações, públicas e privadas, grandes e pequenas, de todos os sectores económicos. No momento da sua publicação, o seu desempenho estabelece o estado da arte para o Português relativamente a modelos neuronais de linguagem publicados e abertos. É este tipo de modelos de linguagem que suportam toda a gama de aplicações de IA que estão a fazer furor, desde chatbots até tradução automática.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital", diz em comunicado de imprensa, António Branco, professor do Departamento de Informática da Ciências ULisboa, coordenador do NLX | Grupo da Fala e Linguagem Natural da Ciências ULisboa e coordenador da equipa deste projeto, desenvolvido em parceria com a Faculdade de Engenharia da Universidade do Porto (FEUP).

O Albertina PT é um codificador da família BERT, baseado na arquitetura neural Transformer e desenvolvido sobre o modelo DeBERTa.

Para António Branco, o Albertina “constitui um passo crucial para democratizar esta tecnologia, que deixa de estar confinada às bigtechs e aos laboratórios de investigação, e vê todo o seu potencial disponível para alavancar a criação de valor e a melhoria da vida das pessoas”.
O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou. “Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina, uma vez que cada um à sua maneira é mais apropriado para diferentes finalidades e condições de utilização”, acrescenta António Branco.

Os investigadores do NLX Ciências ULisboa - João Rodrigues, Luís Gomes, João Silva, António Branco e Rodrigo Santos - e os investigadores do Laboratório de Inteligência Artificial e Ciência de Computadores da FEUP - Henrique Lopes Cardoso e Tomás Osório - apresentam os resultados deste trabalho no artigo "Advancing Neural Encoding of Portuguese with Transformer Albertina PT*", submetido recentemente na arXiv.

“Este primeiro resultado e as reações que estamos a receber são muito encorajadores, e o balanço é muito positivo”, conclui António Branco.

O Albertina nos media
Expresso, Economia dia a dia, Human Resources, RTP, Correio da Manhã, Pplware Online.

Ana Subtil Simões, Gabinete de Jornalismo Ciências ULisboa
info.ciencias@ciencias.ulisboa.pt

As candidaturas ao programa de doutoramento em Filosofia da Ciência, Tecnologia, Arte e Sociedade estão abertas até ao dia 12 de setembro de 2014.

Alunos de Ciências

Na primeira semana em Ciências os novos alunos enquanto aguardam pela inscrição podem assistir a palestras.

A relevância do estudo publicado na “Astronomy & Astrophysics” está na quantidade e qualidade da informação obtida por aquela infraestrutura astronómica internacional, tanto a nível químico como dinâmico.

Prémio Jovem Investigador da Sociedade Europeia de Aterosclerose

“A comunidade científica presente no evento congratulou-me, e a toda a equipa, pela qualidade do trabalho desenvolvido. Disseram que Portugal estava de parabéns!”, explicou a vencedora do Prémio Jovem Investigador da Sociedade Europeia de Aterosclerose, Catarina Alves.

Os resultados da 1.ª fase do concurso nacional de acesso ao ensino superior são divulgados a 8 de setembro.

A actividade científica é colectiva e cumulativa. Newton disse: “Se vi um pouco mais longe do que os outros, é porque pude subir aos ombros de alguns gigantes”.

Gestos que salvam 2014

A partir do mês de setembro, entre outras iniciativas, está prevista uma ação de sensibilização em avaliação e prevenção de riscos.

Convento da Arrábida

“No limite do (im)possível” organizado pelo Instituto de Ciências da Complexidade ocorreu no Convento da Arrábida, entre 30 de junho e 1 de julho passado.

“Nós oferecemos muitas oportunidades sobretudo para pós-doutorados, pessoas bem treinadas”, disse Jorge Almeida Guimarães, referindo que em Portugal existem mais de cinco mil bolseiros brasileiros, enquanto o número de portugueses no Brasil é ainda reduzido.

Uma reflexão sobre o ano lectivo 2013/2014.

Encontra-se aberto concurso para atribuição de uma Bolsa de Investigação para Mestre no âmbito do Projeto “ Biosustain – Mobilidade Sustentável: Perspetivas para o futuro da produção de biocombustíveis”, Laborat&oacut

De 11 a 14 de agosto as instalações da Faculdade de Ciências da ULisboa encontram-se encerradas, na sequência do corte do abastecimento de água. Os Departamentos encontram-se encerrados até 19 de agosto.

Laboratório de Ciências

Ana Paula Calixto é docente do ensino secundário há 28 anos. Cátia Silva é aluna de Ciências desde 2005, neste momento frequenta o doutoramento. Conheça os testemunhos de quem visita e estuda em Ciências.

Otília Correia

Estudantes portugueses conquistam duas medalhas de bronze na 25.ª Olimpíadas Internacionais de Biologia - IBO 2014, realizadas na Indonésia, em Julho passado. Em Setembro, outros alunos portugueses concorrem às Olimpíadas Ibero Americanas, que se realizam no México.

Encontram-se abertas as candidaturas para o Programa de Estágios Jovens Animadores do Museu de Eletricidade (PEJAME), para jovens entre os 18 e os 25 anos que, na altura de candidatura ao programa, sejam estudantes do ensino superior universitário.

Imagem da capa do livro

“ (…) Há também biólogos que calçam as botas e vão para dentro da floresta tropical, para cima das montanhas, para o fundo do mar, e foi esse lado que quisemos mostrar”, explicam Diogo Veríssimo e Miguel Pais, antigos alunos de Ciências e dois dos autores do livro BIOgrafias.

Encontram-se abertas candidaturas para estágios internacionais remunerados do Programa Inov Contacto, com uma duração de seis a nove meses, para 

Encontra-se aberto concurso para admissão de candidatos, de ambos os sexos, com destino ao Curso de Formação de Oficiais do Regime de Contrato da Força Aérea.
 

“Ter a oportunidade de vestir estas batas é com certeza mais giro do que estar em casa sentado em frente à televisão. Estamos a fazer coisas que não fazemos no dia a dia. Por isso, esta é uma oportunidade única. Estamos a aproveitar o nosso tempo da melhor maneira”, comentou Ricardo Santos, aluno do 11.º ano da Escola Secundária António Damásio.

Está disponível a edição de 2014 do Journal Citation Reports (dados de 2013).

COST

Participação no programa COST a partir de 3 Julho de 2014.

FA1403: Interindividual variation in response to consumption of plant foods bioactives and determinants involved.

IMSF

A decorrer de 24-29 de Agosto na Suíça.

Consulte o evento em http://www.imsc2014.ch/

Encontram-se abertas candidaturas para 77 estágios profissionais para o grupo Portucel Soporcel, com a duração máxima de 12 meses, remunerados com uma bolsa de est&aac

Páginas