Já conhece o Albertina PT?

Primeiro grande modelo aberto de IA para a língua portuguesa

cérebro

O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou

Unsplash+ com Getty Images
António Branco
“Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina", diz António Branco
Fonte GICD DCI Ciências ULisboa

O primeiro grande modelo de Inteligência Artificial generativa para a língua portuguesa, para cada uma das variantes, do Brasil e de Portugal, gratuito, em código aberto e com acesso universal está disponível desde este mês e tem 900 milhões de parâmetros.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital."
António Branco

O Albertina PT destina-se a investigadores e organizações, públicas e privadas, grandes e pequenas, de todos os sectores económicos. No momento da sua publicação, o seu desempenho estabelece o estado da arte para o Português relativamente a modelos neuronais de linguagem publicados e abertos. É este tipo de modelos de linguagem que suportam toda a gama de aplicações de IA que estão a fazer furor, desde chatbots até tradução automática.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital", diz em comunicado de imprensa, António Branco, professor do Departamento de Informática da Ciências ULisboa, coordenador do NLX | Grupo da Fala e Linguagem Natural da Ciências ULisboa e coordenador da equipa deste projeto, desenvolvido em parceria com a Faculdade de Engenharia da Universidade do Porto (FEUP).

O Albertina PT é um codificador da família BERT, baseado na arquitetura neural Transformer e desenvolvido sobre o modelo DeBERTa.

Para António Branco, o Albertina “constitui um passo crucial para democratizar esta tecnologia, que deixa de estar confinada às bigtechs e aos laboratórios de investigação, e vê todo o seu potencial disponível para alavancar a criação de valor e a melhoria da vida das pessoas”.
O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou. “Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina, uma vez que cada um à sua maneira é mais apropriado para diferentes finalidades e condições de utilização”, acrescenta António Branco.

Os investigadores do NLX Ciências ULisboa - João Rodrigues, Luís Gomes, João Silva, António Branco e Rodrigo Santos - e os investigadores do Laboratório de Inteligência Artificial e Ciência de Computadores da FEUP - Henrique Lopes Cardoso e Tomás Osório - apresentam os resultados deste trabalho no artigo "Advancing Neural Encoding of Portuguese with Transformer Albertina PT*", submetido recentemente na arXiv.

“Este primeiro resultado e as reações que estamos a receber são muito encorajadores, e o balanço é muito positivo”, conclui António Branco.

O Albertina nos media
Expresso, Economia dia a dia, Human Resources, RTP, Correio da Manhã, Pplware Online.

Ana Subtil Simões, Gabinete de Jornalismo Ciências ULisboa
info.ciencias@ciencias.ulisboa.pt
Representação de uma bicamada fosfolipídica usada como modelo de uma membrana celular (à esquerda); representação de uma ligação de halogéneo (a amarelo) efetuada entre um átomo de bromo e um átomo de oxigénio de um fosfolípido (à direita)

Investigadores do BioISI Ciências ULisboa conseguiram demonstrar que moléculas halogenadas interagem com membranas biológicas por via de ligações de halogéneo, um fenómeno que pode ser determinante para a eficácia terapêutica de fármacos.

Arame

Mais um artigo do GAPsi Ciências ULisboa. Desta vez a temática é dedicada ao ciclo das relações abusivas.

painéis solares

A 38th European Photovoltaics Specialists Conference - EUPVSEC 2021 realiza-se de 6 a 10 de setembro de 2021, no formato online. João Serra, professor do Departamento de Engenharia Geográfica, Geofísica e Energia da Ciências ULisboa, é o chairman da maior e mais importante conferência europeia dedicada à energia fotovoltaica.

Helena Avelar de Carvalho

"A Helena era, sem qualquer dúvida, uma das melhores na sua área, no mundo inteiro, e a sua carreira académica estava só a começar", escreve Henrique Leitão, presidente do Departamento de Histórioa e Filosofia das Ciências.

Caneta e números

“A matemática é uma parte essencial do património cultural da humanidade”, dizem Ana Rute Domingos e Maria Manuel Torres, docentes do Departamento de Matemática da Ciências ULisboa, a propósito do Dia Internacional da Matemática, que se celebra a 14 de março.

Miguel Marques de Magalhães Ramalho, vulto destacado da comunidade geológica, que foi vários anos professor catedrático convidado da Ciências ULisboa, faleceu a 8 de março de 2021. "A ele se deve a introdução da conceção moderna de Estratigrafia no curso de Geologia do Departamento, enriquecida por saídas de campo de elevado valor didático", escreve a professora Ana Cristina Azerêdo. Ciências ULisboa apresenta sentidas condolências aos seus familiares, amigos e colegas.

Peixes

O primeiro “Guia de Peixes de Água Doce e Migradores de Portugal Continental” coordenado por Maria João Collares-Pereira, professora da Ciências ULisboa e do cE3c, publicado em 2021, já está à venda. Os peixes de água doce são um dos grupos de vertebrados mais ameaçados em todo o mundo. Portugal não é exceção, com mais de 60% das espécies nativas em risco de extinção.

Vinhas Douro, Portugal

A Comissão Nacional da Organização Internacional da Vinha e do Vinho premiou “The interplay between membrane lipids and phospholipase A family members in grapevine resistance against Plasmopara viticola” com a Distinção CNOIV 2020, atribuído ao melhor trabalho nacional de divulgação, experimentação ou investigação no domínio da viticultura, da autoria de um grupo de investigadores da Ciências ULisboa.

Cristina Santos, Margarida Amaral, Claudina Rodrigues-Pousada, Alexandre Quintanilha, Ana Ponces, Pedro Moradas-Ferreira, Ruy Pinto

É com grande tristeza que informamos o falecimento duma grande mulher cientista, a professora Claudina Rodrigues-Pousada, uma grande mentora de vida na Ciência pelo seu empenho, persistência, foco e determinação.

Joana Carvalho

Joana Carvalho, de 28 anos, investigadora na Fundação Champalimaud, alumna da Universidade de Groningen, na Holanda, e Ciências ULisboa, foi uma das cientistas galardoadas com a 17ª edição das Medalhas de Honra L’Oréal Portugal para Mulheres na Ciência e com uma Individual Fellowships Marie Skłodowska-Curie Actions.

Logotipo Radar

Décima terceira rubrica Radar Tec Labs, dedicada às atividades do Centro de Inovação da Faculdade. A empresa em destaque é a Lean Health Portugal.

Inês Fragata

Doutorada em Biologia Evolutiva pela Ciências ULisboa e atualmente investigadora de pós-doutoramento no cE3c Ciências ULIsboa é uma das quatro jovens cientistas portuguesas premiadas com as Medalhas e vai estudar a contaminação do solo por metais pesados através do tomateiro e ácaros-aranha.

Pilar com frase

Valorizar o conhecimento é a oportunidade para dar a conhecer um outro Portugal que tantas vezes passa despercebido. O press kit da Faculdade tem uma página de especialistas com 162 nomes e mais de 200 temas científicos. É fundamental que os mass media coloquem a ciência no centro das atenções.

O terceiro meeting científico da ação COST EUTOPIA ocorreu entre 15 e 17 de fevereiro passado.Trata-se de um projeto de colaboração interdisciplinar que explora a importância crescente da topologia em sistemas físicos e biológicos, e no desenvolvimento de novos materiais. Esta ação reúne 29 países e mais de 100 participantes. Portugal está representado em dois dos cinco grupos de trabalho temáticos e Patrícia Faísca é responsável pela liderança de um deles.

Perspetiva dos Valles Marineris de Marte

"Os objetivos destas missões compreendem: a preparação clara de uma futura colónia humana em Marte, e a tentativa de responder à questão se houve vida em Marte", escreve o cientista Pedro Mota Machado.

Pisco-de-peito-ruivo

+Biodiversidade@CIÊNCIAS: Mobilizar a comunidade de Ciências para a promoção da sustentabilidade no Campus” é uma iniciativa do Laboratório Vivo para a Sustentabilidade. Para colaborar neste projeto basta participar nas ações de monitorização, através da plataforma BioDiversity4All ou da app iNaturalist/BioDiversity4All.

Uma pessoa a trabalhar no Centro de Testes

O Centro de Testes (CT) da Ciências ULisboa  atingiu 100% de concordância nas provas a que foi submetido no âmbito do programa mundial de controlo de qualidade da Organização Mundial de Saúde - OMS “WHO Global Round of Laboratory Proficiency Testing” e no Programa Nacional de Avaliação Externa da Qualidade promovido pelo Instituto Nacional de Saúde Dr. Ricardo Jorge (INSA).

Logotipo do projeto

A participação no Projeto Lisboa Romana (Felicitas Iulia Olisipo) vem na sequência de vários anos de colaboração entre os geólogos da Ciências ULisboa e várias equipas de arqueólogos que têm por missão o estudo e a salvaguarda do património arqueológico que ocorre durante as escavações associadas a várias obras na região de Lisboa.

Pessoas no topo de uma colina

O Young Leaders Access Program visa ajudar jovens, entre os 18 e os 26 anos, a impactar as suas comunidades. Leia a crónica de Vasco Medeiros, um dos 50 jovens selecionados em 2020 para realizar este programa. As candidaturas à edição de 2021 terminam em março.

Pessoa

"Existem várias teorias que dão contexto a este medo, mas sobretudo há uma ideia subjacente: o medo de não viver, sentir ou fazer qualquer coisa em vida, uma sensação de vida não vivida", escreve Andreia Santos, psicóloga no GAPsi Ciências ULisboa.

Vários números desenham um coração

Brainteaser é o nome do consórcio que coloca a inteligência artificial ao serviço da saúde, nomeadamente dos doentes com Esclerose Lateral Amiotrófica e Esclerose Múltipla. A Universidad Politécnica de Madrid lidera o consórcio composto por 11 parceiros de Espanha, Itália, Portugal, Sérvia, Irlanda e Bélgica.

CLOUD

As partículas de aerossol atmosférico podem modificar as nuvens e o clima ou contribuir para a poluição urbana. O estudo “Role of iodine oxoacids in atmospheric aerosol nucleation” publicado na Science apresenta os resultados da experiência CLOUD (Cosmics Leaving Outdoor Droplets), anuncia o CERN. Este artigo é assinado por mais de cem investigadores, entre os quais se contam João Almeida, António Amorim, António Dias e António Tomé.

Logotipo Radar

O primeiro Radar Tec Labs de 2021, dedicado às atividades do Centro de Inovação da Faculdade, tem como empresa em destaque a Delta Soluções.

José Artur Martinho Simões

A ideia para esta entrevista surgiu na sequência da publicação do livro "A Anatomia das Moléculas", de José Artur Martinho Simões, pela Imprensa da ULisboa. É um livro curto que numa linguagem simples, precisa e atraente, acompanhada de muitas imagens, nos dá a conhecer o admirável mundo das moléculas, as suas propriedades, ligações e reações.

Pessoa a tomar notas num caderno

Desde que o atual site da Faculdade foi lançado, há cerca de nove anos, foram publicados 1800 géneros jornalísticos relacionados com o ensino, a investigação e a transferência do conhecimento e da inovação nas áreas das ciências exatas e naturais e das tecnociências. Em 2020 publicamos 144 géneros jornalísticos, no ano anterior 121. Este mês demos visibilidade a mais de uma mão cheia de assuntos diferentes.

Páginas