Já conhece o Albertina PT?

Primeiro grande modelo aberto de IA para a língua portuguesa

cérebro

O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou

Unsplash+ com Getty Images
António Branco
“Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina", diz António Branco
Fonte GICD DCI Ciências ULisboa

O primeiro grande modelo de Inteligência Artificial generativa para a língua portuguesa, para cada uma das variantes, do Brasil e de Portugal, gratuito, em código aberto e com acesso universal está disponível desde este mês e tem 900 milhões de parâmetros.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital."
António Branco

O Albertina PT destina-se a investigadores e organizações, públicas e privadas, grandes e pequenas, de todos os sectores económicos. No momento da sua publicação, o seu desempenho estabelece o estado da arte para o Português relativamente a modelos neuronais de linguagem publicados e abertos. É este tipo de modelos de linguagem que suportam toda a gama de aplicações de IA que estão a fazer furor, desde chatbots até tradução automática.

"Trata-se de um marco histórico muito importante na preparação tecnológica da língua portuguesa para a era digital", diz em comunicado de imprensa, António Branco, professor do Departamento de Informática da Ciências ULisboa, coordenador do NLX | Grupo da Fala e Linguagem Natural da Ciências ULisboa e coordenador da equipa deste projeto, desenvolvido em parceria com a Faculdade de Engenharia da Universidade do Porto (FEUP).

O Albertina PT é um codificador da família BERT, baseado na arquitetura neural Transformer e desenvolvido sobre o modelo DeBERTa.

Para António Branco, o Albertina “constitui um passo crucial para democratizar esta tecnologia, que deixa de estar confinada às bigtechs e aos laboratórios de investigação, e vê todo o seu potencial disponível para alavancar a criação de valor e a melhoria da vida das pessoas”.
O desenvolvimento de grandes modelos neuronais de IA generativa para a língua portuguesa ainda agora começou. “Vamos continuar a desenvolver novas versões do Albertina, e também vamos desenvolver outros modelos de linguagem com arquiteturas neuronais diferentes da arquitetura da Albertina, uma vez que cada um à sua maneira é mais apropriado para diferentes finalidades e condições de utilização”, acrescenta António Branco.

Os investigadores do NLX Ciências ULisboa - João Rodrigues, Luís Gomes, João Silva, António Branco e Rodrigo Santos - e os investigadores do Laboratório de Inteligência Artificial e Ciência de Computadores da FEUP - Henrique Lopes Cardoso e Tomás Osório - apresentam os resultados deste trabalho no artigo "Advancing Neural Encoding of Portuguese with Transformer Albertina PT*", submetido recentemente na arXiv.

“Este primeiro resultado e as reações que estamos a receber são muito encorajadores, e o balanço é muito positivo”, conclui António Branco.

O Albertina nos media
Expresso, Economia dia a dia, Human Resources, RTP, Correio da Manhã, Pplware Online.

Ana Subtil Simões, Gabinete de Jornalismo Ciências ULisboa
info.ciencias@ciencias.ulisboa.pt

O trabalho da jovem cientista também passa pela criação de uma rede de investigadores europeia, que colabore no desenvolvimento de aplicações médicas na frequência de micro-ondas e agilize processos de ensaios clínicos e de comercialização de novos equipamentos médicos.

“Os ocupantes cumpriram as instruções, saíram do edifício de forma muito ordeira e a evacuação foi feita com rapidez”, declarou Júlia Alves, assessora para a Segurança do Trabalho na FCUL.

Marília Antunes

“[Tê-la na nossa equipa] é absolutamente enriquecedor e imprescindível para a boa continuação do nosso trabalho”, comenta Sandra Garcês, coordenadora do projeto "An Evidence-Based Approach to Optimize Therapeutic Decisions Involving Biological Drugs”, distinguido com o Prémio Pfizer de Investigação Clínica 2013, que contou com a participação da cientista da FCUL.

The European Commission has presented on December 11th  the first calls for projects under Horizon 2020, the European Union's €80 billion research and innovation programme.

Consulte as apresentações disponíveis.

 

Para além de Paulo Urbano o estudo contará com a participação de um bolseiro e a consultoria do investigador Joel Lehman, da University of Texas at Austin. O financiamento total excede os 22.000 euros.

Autores do artigo publicado no Journal of Catalysis

Carla D. Nunes, Cristina I. Fernandes, Marta S. Saraiva, Teresa G. Nunes e Pedro D. Vaz trabalham há dois anos num estudo que visa o desenvolvimento de catalisadores mais eficientes e facilmente separáveis para reciclagem.

A equipa do CAUUL, responsável por este projeto, tem como objetivo “construir um modelo do sistema climático de Vénus e colocar os resultados de vários anos de investigação à disposição da comunidade científica mundial”.

Cartaz

A investigação premiada tem como foco principal os doentes com Artrite Reumatoide.

FCUL recebe delegação russa

“Achei o encontro muito interessante. Na Rússia não há muito conhecimento sobre a educação em Portugal e hoje descobrimos muitos aspetos interessantes que podemos vir a aplicar na nossa estrutura de ensino”, comentou Predybaylo Bladislav, membro da delegação russa em visita à UL

Durante as férias de Natal, de 23 de Dezembro a 3 de Janeiro a biblioteca do C4 está aberta todos os dias úteis das 9:30h às 17:30h.

Um dos Prémios Pfizer de Investigação Básica 2013 foi atribuído ao projeto “Global ENaC Regulators and Potential Cystic Fibrosis Therapy Targets", que tem como investigadora principal Margarida D. Amaral, professora do Departamento de Química e Bioquímica e um dos membros do BioFIG - Centro de Biodiversidade, Genómica Integrativa e Funcional da FCUL.

Rui Santos, Andreia Dias, Ricardo Santos, Dora Inácio e Hugo Ferreira

O conceito do projeto bioM surgiu durante o 2.º semestre de 2012/2013 no âmbito da disciplina Inovação e Transferência de Tecnologias.

João Lin Yun

João Lin Yun distingue-se na área da Física e da Astronomia. No seu currículo, diversidade de atividades organizadas e desenvolvidas dentro do território nacional e fora dele são um marco evidente. Para além da forte aposta na carreira profissional, a vida do professor da FCUL é marcada também pela escrita.

João Lin Yun

“Quando escrevo, há alturas em que as ideias e o material fluem de forma tão espontânea que me surpreendo com o resultado! É como se as personagens tomassem as rédeas e dissessem: ‘quero dizer isto e fazer aquilo!’ E eu limito-me a obedecer-lhes…”, comenta o professor da FCUL, João Lin Yun.

As candidaturas à formação avançada decorrem até 13 de dezembro. Para esta 1.ª edição, que se inicia a 13 de janeiro de 2014, devem ser atribuídas seis bolsas mistas cujos trabalhos decorrem em Portugal e no estrangeiro, com o intuito de desenvolver projetos conjuntos entre países.

Paulo Veríssimo, professor catedrático do DI-FCUL, participou no passado dia 25 de novembro de 2013, no programa "Sociedade Civil", transmitido na RTP2.
 
António Branco

Um dos resultados chave da análise levada a efeito é o de que a língua portuguesa é um dos idiomas para o qual a preparação tecnológica para a era digital é "fragmentária".

Imagem abstrata da  "Philosophy of Science in the 21st Century - Challenges and Tasks"

Durante o evento será lançado o programa doutoral em Filosofia da Ciência, Tecnologia, Arte e Sociedade, recentemente aprovado pela FCT, com a mais elevada classificação: “Exceptionally strong with essentially no weaknesses”.

Rita Cascão

O sucesso do Biobanco-IMM é promovido pelo contínuo aumento de parcerias e colaborações não só com empresas de biotecnologia e unidades de saúde, mas também com institutos de investigação científica e investigadores académicos de ciências básicas, como os investigadores da FCUL.

SIMPLES AZULEJOS

Azulejos quadrados e Matemática

 

Bandeira de Marrocos

Atualmente a equipa prossegue com os trabalhos de correção de falhas e de afinação do CuCo de modo a dar apoio às sete faculdades marroquinas e a prepará-lo também para entrar em operação no DI-FCUL já no próximo ano letivo.

José Afonso

Chama-se galáxia IRAS 08572+3915 e é a mais luminosa do universo local. José Afonso é um dos membros da equipa de astrónomos internacionais, que anunciou recentemente a descoberta. O investigador da FCUL e dirigente do CAAUL é muito otimista quanto ao presente e futuro desta área científica.

Consulte informação adicional aqui.

Bill Fyfe foi um grande amigo de Portugal. Orientou ou coorientou vários doutoramentos de portugueses, acerca de temas relevantes para Portugal e fomentou as ligações científicas entre Portugal-Brasil-Canadá. Em 1990 a Universidade de Lisboa outorgou-lhe o grau de doutor honoris causa.

Páginas