Já conhece o Albertina PT?

Primeiro grande modelo aberto de IA para a língua portuguesa

cérebro

O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou

Unsplash+ com Getty Images
António Branco
“Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina", diz António Branco
Fonte GICD DCI Ciências ULisboa

O primeiro grande modelo de Inteligência Artificial generativa para a língua portuguesa, para cada uma das variantes, do Brasil e de Portugal, gratuito, em código aberto e com acesso universal está disponível desde este mês e tem 900 milhões de parâmetros.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital."
António Branco

O Albertina PT destina-se a investigadores e organizações, públicas e privadas, grandes e pequenas, de todos os sectores económicos. No momento da sua publicação, o seu desempenho estabelece o estado da arte para o Português relativamente a modelos neuronais de linguagem publicados e abertos. É este tipo de modelos de linguagem que suportam toda a gama de aplicações de IA que estão a fazer furor, desde chatbots até tradução automática.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital", diz em comunicado de imprensa, António Branco, professor do Departamento de Informática da Ciências ULisboa, coordenador do NLX | Grupo da Fala e Linguagem Natural da Ciências ULisboa e coordenador da equipa deste projeto, desenvolvido em parceria com a Faculdade de Engenharia da Universidade do Porto (FEUP).

O Albertina PT é um codificador da família BERT, baseado na arquitetura neural Transformer e desenvolvido sobre o modelo DeBERTa.

Para António Branco, o Albertina “constitui um passo crucial para democratizar esta tecnologia, que deixa de estar confinada às bigtechs e aos laboratórios de investigação, e vê todo o seu potencial disponível para alavancar a criação de valor e a melhoria da vida das pessoas”.
O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou. “Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina, uma vez que cada um à sua maneira é mais apropriado para diferentes finalidades e condições de utilização”, acrescenta António Branco.

Os investigadores do NLX Ciências ULisboa - João Rodrigues, Luís Gomes, João Silva, António Branco e Rodrigo Santos - e os investigadores do Laboratório de Inteligência Artificial e Ciência de Computadores da FEUP - Henrique Lopes Cardoso e Tomás Osório - apresentam os resultados deste trabalho no artigo "Advancing Neural Encoding of Portuguese with Transformer Albertina PT*", submetido recentemente na arXiv.

“Este primeiro resultado e as reações que estamos a receber são muito encorajadores, e o balanço é muito positivo”, conclui António Branco.

O Albertina nos media
Expresso, Economia dia a dia, Human Resources, RTP, Correio da Manhã, Pplware Online.

Ana Subtil Simões, Gabinete de Jornalismo Ciências ULisboa
info.ciencias@ciencias.ulisboa.pt

“A juvenile allosauroid theropod (Dinosauria, Saurischia) from the Upper Jurassic of Portugal” da autoria de Elisabete Malafaia, Pedro Mocho, Fernando Escaso e Francisco Ortega descreve um exemplar ainda juvenil de um dos grandes dinossáurios carnívoros do Jurássico, com cerca de 150-145 milhões de anos, e foi publicado este mês na revista “Historical Biology”.

"É curioso, constatar que todas as teorias da ciência não são sobre a forma, mas sim sobre a função. Isto é, são sobre como as coisas se desenvolvem e mudam. São acerca de processos."

A primeira entrega dos dados (data release) da missão Gaia da Agência Espacial Europeia (ESA) ocorreu esta quarta-feira, 14 de setembro, quase três anos depois do seu lançamento e foi transmitida online pela ESA. De acordo com o comunicado de imprensa emitido por Ciências, o consórcio internacional inclui investigadores e engenheiros de quatro universidades portuguesas.

O Tec Labs – Centro de Inovação de Ciências foi distinguido com o 2.º Prémio Nacional na Categoria de Promoção do Espírito de Empreendedorismo dos Prémios Europeus de Promoção Empresarial, uma iniciativa da Comissão Europeia gerida em Portugal por IAPMEI — Agência para a Competitividade e Inovação, e cuja cerimónia de entrega dos prémios ocorreu no Museu do Oriente, em Lisboa, a 8 de setembro.

O que fazem e o que pensam alguns membros da comunidade de Ciências? O nono Dictum et factum é com Carla Romero, técnica superior do Gabinete de Estudos Pós-graduados da Unidade Académica de Ciências.

A descoberta da localização precisa de uma espécie de GPS (Global Positioning System) no nosso cérebro (Moser e Moser, 2014), capaz de nos ajudar a responder a duas perguntas básicas “Onde estamos?” e “Como vamos até acolá?”, indispensáveis para a nossa vida normal, estimulou a discussão do tema computação espacial (ler a revista norte americana Communications Of the ACM, janeiro de 2016, páginas 72-81).

Joaquim Alves Gaspar, de 67 anos, investigador pós-doutoral do Centro Interuniversitário de História das Ciências e da Tecnologia, acaba de ser distinguido com uma Starting Grant do Conselho Europeu de Investigação, a primeira a ser atribuída a um membro da Faculdade de Ciências da Universidade de Lisboa. Em entrevista a Ciências apresenta o projeto “The Medieval and Early Modern Nautical Chart: Birth, Evolution and Use” alvo desta distinção, no valor de 1,2 milhões de euros, bem como o homem que pretende causar um impacto significativo na História da Cartografia, demonstrando a eficácia das suas ferramentas e ajudando a criar uma nova geração de cientistas nesta área.

O Conselho Europeu de Investigação atribuiu uma Starting Grant, no valor de 1,2 milhões de euros, a Joaquim Alves Gaspar, membro integrado do Centro Interuniversitário de História das Ciências e da Tecnologia (CIUHCT) e investigador principal do projeto “The Medieval and Early Modern Nautical Chart: Birth, Evolution and Use”.

"No momento atual o alerta de potencial erupção ainda não terminou uma vez que a atividade sísmica se mantém acima dos valores normais", escreve José Madeira em mais uma crónica de viagem.

"Comunicar significa tornar comum. E o que queremos tornar comum? Ciência. Esse é o objetivo", escreve em artigo de opinião Manuel Leite Valença.

César Garcia, curador convidado do Museu Nacional de História Natural da Universidade de Lisboa, investigador do cE3c e antigo aluno de Ciências, é o autor de uma das fotografias premiadas, escolha do editor, no âmbito da 4.ª edição do BMC Ecology Image Competition, uma iniciativa da BioMed Central.

A equipa da UNDAC (United Nations Disaster Assessment and Coordination)/ERCC (European Response Coordination Centre) da Comissão Europeia (CE) tem feito avaliação dos planos de emergência existentes e suas lacunas ou melhoramentos necessários, bem como reuniões com os principais agentes intervenientes a nível local em caso de catástrofe ou emergência.

Cerca de 60 alunos da EB1 S. João de Brito,  Agrupamento de Escolas de Alvalade, visitaram em julho passado o Departamento de Biologia Animal de Ciências.

Desde a chegada da equipa UNDAC/ERCC a sismicidade tem-se mantido em níveis estáveis após dois dias iniciais em que se tinha tornado progressivamente mais superficial (1 km abaixo do nível do mar).

O que fazem e o que pensam alguns membros da comunidade de Ciências? O oitavo Dictum et factum é com Vera Lopes, técnica superior do Departamento de Geologia de Ciências.

Os vencedores do galardão desenvolveram o melhor projeto de Net Zero Energy House.

Há espírito empreendedor nos corredores de Ciências e a prová-lo esteve a prestação dos alunos de Ciências e do ISCTE-IUL na Sessão Final da Disciplina de Projeto Empresarial.

Cerca de 14 alunos do ensino secundário decidiram passar uma semana das suas férias a frequentar a Escola de Verão de Energia, organizada pelos professores e alunos do mestrado integrado de Engenharia da Energia e do Ambiente, e que já vai na sua segunda edição.

Pedro Veiga, Luís Correia e Teresa Chambel, professores do Departamento de Informática (DI) de Ciências, participaram no primeiro E-Tech Portugal, ocorrido no início de junho de 2016, em Setúbal.

A racionalidade (homem racional) é inalcançável, porque a escolha ótima (identificada a maior parte das vezes com a utilidade máxima individual) é demasiado perfeita.

De acordo com o comunicado de imprensa emitido pela faculdade esta segunda-feira, para os investigadores a identificação de novos alvos moleculares é essencial para definir estratégias terapêuticas cada vez mais robustas nos doentes com fibrose quística. Entrevista com Carlos Farinha.

Participantes no laboratório

“A Química e os segredos de um chocolate perfeito”, “Olhando os átomos”, “A diversidade escondida dos oceanos: do microscópio ao DNA” e “As bactérias e a resistência a antibióticos” são só alguns exemplos dos projetos disponíveis no âmbito do

A Galeria Ciências é um espaço recente, dinâmico, polivalente, com grandes potencialidades.

José Pica

O que fazem e o que pensam alguns membros da comunidade de Ciências? O sétimo Dictum et factum é com José Pica, assistente técnico do Departamento de Biologia Vegetal de Ciências.

Crónica de Fernando Barriga e Sofia Martins, investigadores do IDL Ciências, em missão oceanográfica no Atlântico - TAG hydrothermal field.

Páginas