Seminário

Are the least knowledgeable unaware of it?

A statistical revisitation of the Dunning-Kruger effect

Sala 2.2.12, Ciências ULisboa (com transmissão através de Videoconferência)

Por Joana Gonçalves de Sá (Coordinator Investigator of the Social Physics and Complexity - SPAC - research group at LIP).

It has been argued that “no problem in judgment and decision making is more prevalent and more potentially catastrophic than overconfidence”, with Nobel laureate Daniel Kahneman going as far as stating that if he could eliminate just one judgement bias, overconfidence would be his choice. Most notably, Dunning and Kruger have shown that there is little to no correlation between knowledge and confidence, with the least knowledgeable also being more likely to overestimate their skills. This can play a role in misinformation control and science communication in general, as several studies have identified evidence of the Dunning-Kruger Effect (DKE) in highly controversial anti-science movements concerning vaccinations, biotechnology use, and climate change. However, both the original Dunning and Kruger paper and early subsequent work, have been revisited for different reasons including 1) being tested mostly on small populations, often of elite college students, 2) in the USA. More recent criticism focuses on methodological issues, namely 3) ignoring a possible expected regression to the mean effect, and 4) not discriminating between lack of metacognition or just having inappropriate priors. Finally, as knowledge levels often do not follow a perfect normal distribution, 5) presenting these results in quartiles, the common practice, might hide important variance, particularly in the most extreme quartiles, where several knowledge and confidence bins are treated as one.

In this talk, I will present a different methodological and analytical approach to address the above issues. First, regarding measurement, we introduce a new method, based on the premise that “don’t know” versus “wrong” answers to knowledge questionnaires can be used as a proxy for confidence, and we examine how this non-self-reported confidence varies with knowledge. Regarding sampling, we apply our metric to several large surveys, conducted over 25 years in Europe and the USA. We also introduce a new analytical approach, whereby we analyze these surveys over its full range of variability (instead of considering only performance quartiles) and compare their results to the two described models: the metacognition model expectation that confidence should grow linearly with knowledge, and the Dunning-Kruger effect of almost no relationship between the two variables (a null model of zero correlation is also considered), as are different answering strategies.

We find that, contrary to previous work, and unlike the DKE, overconfidence is not highest among the least knowledgeable: the relationship between knowledge and confidence is non-linear, with overconfidence peaking at intermediate knowledge levels and leading to populations that have some knowledge but strongly overestimate it. Finally, we investigated public attitudes towards science and found that this intermediate knowledge group also corresponds to the one displaying the most negative attitudes.

I’ll discuss the impact of our findings in the broad field of overconfidence studies, in the context of science communication, and considering current methods of data analysis in social psychology.


Transmissão em direto via Zoom (password: 405084).

14h30
CEAUL - Centro de Estatística e Aplicações da Universidade de Lisboa / CEMAT - Centro de Matemática Computacional e Estocástica

Nesta atividade será possível visitar alguns laboratórios do MARE, de modo a perceber o seu funcionamento e a investigação que aí é conduzida.

Ciência fresquinha? Temos. Uma bebida a acompanhar? Também!

Título do evento, logótipo da Unite! e representação de mão a escrever uma carta

A ULisboa recebe um evento solidário de angariação de fundos para as Bolsas Alumni Solidário, no contexto da Unite! e da sua promoção da inclusão e do bem-estar no campus.

Será que sabes fazer a reciclagem? Será que conheces todos os 10 Rs da sustentabilidade?

Logótipos de Ciências ULisboa/GAPsi e calendarização das palestras

Uma conversa sobre regulação emocional.

Conferência do Centro Interuniversitário de História das Ciências e da Tecnologia, por Gemma Cirac-Claveras (Institut d'Història de la Ciència - Barcelona).

Alguma vez te questionaste como é que a eletrónica que nos rodeia é feita?

Título/data/local do evento e logótipos das entidades envolvidas

Uma viagem em que os visitantes terão a oportunidade de conhecer o LIP e os lugares para onde viajamos diariamente no nosso trabalho - os lugares onde estão instaladas as nossas experiências, de onde chegam os dados que analisamos, onde estão (ou estarão) instalados os detetores que construímos, onde é aplicada a investigação que se faz no LIP.

A inteligência artificial (IA) tem estado no centro das atenções devido ao seu rápido desenvolvimento e potencial transformador em todas as áreas da sociedade, nomeadamente no sector da educação.

Título/data/local do evento e fotografia de profissional de saúde a interagir com um paciente, em tons sépia

Com foco na promoção de cuidados de saúde centrados no doente, a conferência pretende mobilizar a comunidade e o ecossistema da ULisboa para discutir estratégias e tendências na área, bem como atuais e futuras iniciativas de investigação clínica e de dados com vista à prestação de cuidados de elevado valor.

Data Science Seminar, por Nuno Neves (LASIGE/DI-FCUL).

Imagem do evento - título, local e data do evento

Investigação Ecológica ao Serviço da Conservação

Durante este dia, acesso gratuito ao Museu, ao Jardim Botânico de Lisboa e ao Jardim Botânico Tropical.

Título/data/local do evento e representação do cérebro humano

A iniciativa reúne estudantes e investigadores que apresentam e discutem trabalhos de investigação em curso, e novas propostas e ideias nas áreas da mente, cérebro e cognição.

Representação futurista de sistema de produção agrícola

Conferência Anual do Colégio F3 e da Rede Agro da Universidade de Lisboa.

IDL Lecture, por John Clinton (ETHZ).

Seminário do Centro de Física Teórica e Computacional, por James Kennedy (Departamento de Matemática, Faculdade de Ciências, Universidade de Lisboa, Portugal).

Queres explorar diferentes áreas da Matemática de forma descontraída?

Seminário de Lógica Matemática, por Maria Beatrice Buonaguidi (King's College London).

O curso, a decorrer de 26 a 29 de novembro, destina-se a fornecer competências a quem pretende trabalhar com modelos experimentais ou com vertebrados selvagens.

Título/data/local do evento, logótipos DGES/ULisboa e fotografia de pormenor de docente a corrigir testes

O workshop visa identificar estratégias práticas que promovem a eficácia do estudo perante o aproximar de períodos avaliativos.

Seminário em Biologia Humana e Ambiente, por Paula Alexandra Lopes (Faculdade de Medicina Veterinária - FMV - Universidade de Lisboa; Centre for Interdisciplinary Research in Animal Health - CIISA).

Seminário do Departamento de Física de Ciências ULisboa, por João Lin Yun (Instituto de Astrofísica e Ciências do Espaço, FCUL).

Seminário Doutoral II (Doutoramento em Biologia - Especialidade em Ecologia), por Celso José Miguel Paulo.

Join us for a discussion on the challenges and opportunities of developing and implementing sustainable marine spatial planning (MSP) and management around the globe. With international experts from Brazil, USA, Spain and Portugal as guest speakers!

Páginas