Suzan Verberne's Avatar

Suzan Verberne

@suzanv.bsky.social

1980 | Professor of Natural Language Processing, @LIACS @UniLeiden | Lives in #Nijmegen | Mother of 2 | ๐Ÿ‘ฉ๐Ÿปโ€๐Ÿ’ป๐Ÿ‘ฉ๐Ÿปโ€๐Ÿซ๐Ÿคนโ€โ™€๏ธ๐ŸŒฑ ๐ŸŽผ

355 Followers  |  108 Following  |  14 Posts  |  Joined: 22.11.2023  |  2.0743

Latest posts by suzanv.bsky.social on Bluesky

Post image 29.11.2025 20:56 โ€” ๐Ÿ‘ 147    ๐Ÿ” 37    ๐Ÿ’ฌ 4    ๐Ÿ“Œ 3

I think there's an interesting study of media to be done looking at who gets labeled an "expert" and who gets labeled a "skeptic". Certainly for coverage of "AI", but I wonder if there are other topics that would make interesting comparisons.

25.11.2025 13:20 โ€” ๐Ÿ‘ 222    ๐Ÿ” 36    ๐Ÿ’ฌ 11    ๐Ÿ“Œ 5
Preview
Sarah de Rijcke wordt de nieuwe rector: โ€˜Ik nodig iedereen uit om naar me toe te stappenโ€™ De decaan van de faculteit Sociale Wetenschappen Sarah de Rijcke wordt de nieuwe rector magnificus van de Universiteit Leiden.

BREEK: Sarah de Rijcke wordt nieuwe rector: โ€˜Ik nodig iedereen uit โ€“ vooral jonge studenten, docenten, medewerkers โ€“ om naar me toe te stappen.โ€™
www.mareonline.nl/nieuws/sarah...

24.11.2025 12:44 โ€” ๐Ÿ‘ 2    ๐Ÿ” 4    ๐Ÿ’ฌ 1    ๐Ÿ“Œ 0
Kop in het AD met op de voorgrond kleurenfotoโ€™s van Jetten (links) en Bontenbal (rechts), met op de achtergrond (tussen die twee) een foto van YeลŸilgรถz in grijstinten.

De tekst: โ€œKoppigheid van YeลŸilgรถz zet kwaad bloed bij D66 en CDA: โ€œWe zijn er echt klaar mee.โ€

Kop in het AD met op de voorgrond kleurenfotoโ€™s van Jetten (links) en Bontenbal (rechts), met op de achtergrond (tussen die twee) een foto van YeลŸilgรถz in grijstinten. De tekst: โ€œKoppigheid van YeลŸilgรถz zet kwaad bloed bij D66 en CDA: โ€œWe zijn er echt klaar mee.โ€

Tekst:
Jetten (links op de foto) en Bontenbal (rechts op de foto) gaan vooral genieten van 3 weken formeren zonder YeลŸilgรถz

Tekst: Jetten (links op de foto) en Bontenbal (rechts op de foto) gaan vooral genieten van 3 weken formeren zonder YeลŸilgรถz

Zelden zat de @speld.nl zo dicht bij de werkelijkheid.

13.11.2025 09:32 โ€” ๐Ÿ‘ 38    ๐Ÿ” 10    ๐Ÿ’ฌ 4    ๐Ÿ“Œ 0
โ€˜De VVD is nog nauwelijks een politieke partijโ€™ | De Druktemaker | NPO Radio 1
YouTube video by NPO Radio 1 โ€˜De VVD is nog nauwelijks een politieke partijโ€™ | De Druktemaker | NPO Radio 1

โ€œHet enige stabiele aan de VVD is de onverschillige achterban, die het allemaal niks uitmaakt dat ze een spoor achterlaten van flagrante leugens, Henk kamp, gestruikelde kabinetten en een genormaliseerd extreem rechts.โ€ www.youtube.com/watch?v=NOkk...

05.11.2025 19:33 โ€” ๐Ÿ‘ 501    ๐Ÿ” 174    ๐Ÿ’ฌ 11    ๐Ÿ“Œ 9
Post image

Scholierenverkiezingen NSG Groenewoud

30.10.2025 11:52 โ€” ๐Ÿ‘ 1    ๐Ÿ” 0    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 0
Post image

Nijmegen๐Ÿ’š

30.10.2025 06:37 โ€” ๐Ÿ‘ 130    ๐Ÿ” 6    ๐Ÿ’ฌ 7    ๐Ÿ“Œ 0

Ook mijn middelbare school! (1992-1998)

29.10.2025 12:06 โ€” ๐Ÿ‘ 1    ๐Ÿ” 0    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 0
Video thumbnail

Morgen kunnen wij voorgoed een einde maken aan het tijdperk Wilders.

Met Wilders is de samenleving vastgelopen en haat dominant geworden.

Wij kiezen voor een Nederland dat niet tegenover elkaar staat, maar naast elkaar. Waar hoop sterker is dan haat.

Stem GroenLinks-PvdA.

28.10.2025 22:11 โ€” ๐Ÿ‘ 403    ๐Ÿ” 97    ๐Ÿ’ฌ 14    ๐Ÿ“Œ 4
Post image Post image

noteren we.

22.10.2025 22:09 โ€” ๐Ÿ‘ 671    ๐Ÿ” 205    ๐Ÿ’ฌ 34    ๐Ÿ“Œ 13

Niet te geloven. Na de bbblunder van Plas over D66'ers in Raad v State, blijkt dat Henk Vermeer en Mona Keijzer haar zelfs overtroefden met nรณg foutere cijfers op nรณg stelliger toon. Krankjorum ook dat #Lubach aan politici moet uitleggen wat de taak van de Raad van State is.

14.10.2025 20:45 โ€” ๐Ÿ‘ 488    ๐Ÿ” 184    ๐Ÿ’ฌ 27    ๐Ÿ“Œ 6
Preview
Call for IR for Good Papers call for ir for good papers

โฐ Gentle reminder @ecir2026.eu IR-for-Good track abstracts due: Oct 21, papers due: Oct 28

This year, we're revamping the #IR4Good track as a core conference track to highlight top societally-motivated IR research

CFP: ecir2026.eu/calls/call-f...

Blog post: bhaskar-mitra.github.io/posts/2025/0...

09.10.2025 16:22 โ€” ๐Ÿ‘ 2    ๐Ÿ” 4    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 2
Post image

Omdat niet iedereen een abonnement heeft op de Volkskrant hierbij een screenshot van deze rake column.

22.09.2025 08:13 โ€” ๐Ÿ‘ 116    ๐Ÿ” 37    ๐Ÿ’ฌ 12    ๐Ÿ“Œ 4
We present our new preprint titled "Large Language Model Hacking: Quantifying the Hidden Risks of Using LLMs for Text Annotation".
We quantify LLM hacking risk through systematic replication of 37 diverse computational social science annotation tasks.
For these tasks, we use a combined set of 2,361 realistic hypotheses that researchers might test using these annotations.
Then, we collect 13 million LLM annotations across plausible LLM configurations.
These annotations feed into 1.4 million regressions testing the hypotheses. 
For a hypothesis with no true effect (ground truth $p > 0.05$), different LLM configurations yield conflicting conclusions.
Checkmarks indicate correct statistical conclusions matching ground truth; crosses indicate LLM hacking -- incorrect conclusions due to annotation errors.
Across all experiments, LLM hacking occurs in 31-50\% of cases even with highly capable models.
Since minor configuration changes can flip scientific conclusions, from correct to incorrect, LLM hacking can be exploited to present anything as statistically significant.

We present our new preprint titled "Large Language Model Hacking: Quantifying the Hidden Risks of Using LLMs for Text Annotation". We quantify LLM hacking risk through systematic replication of 37 diverse computational social science annotation tasks. For these tasks, we use a combined set of 2,361 realistic hypotheses that researchers might test using these annotations. Then, we collect 13 million LLM annotations across plausible LLM configurations. These annotations feed into 1.4 million regressions testing the hypotheses. For a hypothesis with no true effect (ground truth $p > 0.05$), different LLM configurations yield conflicting conclusions. Checkmarks indicate correct statistical conclusions matching ground truth; crosses indicate LLM hacking -- incorrect conclusions due to annotation errors. Across all experiments, LLM hacking occurs in 31-50\% of cases even with highly capable models. Since minor configuration changes can flip scientific conclusions, from correct to incorrect, LLM hacking can be exploited to present anything as statistically significant.

๐Ÿšจ New paper alert ๐Ÿšจ Using LLMs as data annotators, you can produce any scientific result you want. We call this **LLM Hacking**.

Paper: arxiv.org/pdf/2509.08825

12.09.2025 10:33 โ€” ๐Ÿ‘ 269    ๐Ÿ” 96    ๐Ÿ’ฌ 6    ๐Ÿ“Œ 21
Post image Post image Post image Post image

Last week, I defended my dissertation "๐˜ˆ ๐˜—๐˜ถ๐˜ป๐˜ป๐˜ญ๐˜ฆ ๐˜ฐ๐˜ง ๐˜—๐˜ฆ๐˜ณ๐˜ด๐˜ฑ๐˜ฆ๐˜ค๐˜ต๐˜ช๐˜ท๐˜ฆ๐˜ด: ๐˜๐˜ฏ๐˜ต๐˜ฆ๐˜ณ๐˜ฅ๐˜ช๐˜ด๐˜ค๐˜ช๐˜ฑ๐˜ญ๐˜ช๐˜ฏ๐˜ข๐˜ณ๐˜บ ๐˜“๐˜ข๐˜ฏ๐˜จ๐˜ถ๐˜ข๐˜จ๐˜ฆ ๐˜›๐˜ฆ๐˜ค๐˜ฉ๐˜ฏ๐˜ฐ๐˜ญ๐˜ฐ๐˜จ๐˜บ ๐˜ง๐˜ฐ๐˜ณ ๐˜™๐˜ฆ๐˜ด๐˜ฑ๐˜ฐ๐˜ฏ๐˜ด๐˜ช๐˜ฃ๐˜ญ๐˜ฆ ๐˜•๐˜ฆ๐˜ธ๐˜ด ๐˜™๐˜ฆ๐˜ค๐˜ฐ๐˜ฎ๐˜ฎ๐˜ฆ๐˜ฏ๐˜ฅ๐˜ข๐˜ต๐˜ช๐˜ฐ๐˜ฏ" at the Vrije Universiteit Amsterdam. *the* moment: #PhDone! ๐ŸŽ“โœจ๐ŸŽ‰

I couldnโ€™t have asked for better supervisors than Antske Fokkens & @suzanv.bsky.social ๐Ÿ’–

09.09.2025 17:56 โ€” ๐Ÿ‘ 21    ๐Ÿ” 1    ๐Ÿ’ฌ 1    ๐Ÿ“Œ 0
Post image

The organization of #ECIR2026 has started! We just had our first call with all track chairs. With the calls now finalized, online and distributed across mailing lists, weโ€™re moving on to the rest of the conference preparation!

@ecir2026.eu
๐Ÿ“ Delft, 30 Mar โ€“ 2 Apr 2026
๐Ÿ‘‰ ecir2026.eu

01.09.2025 12:21 โ€” ๐Ÿ‘ 9    ๐Ÿ” 4    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 2
Preview
IR for Good call for ir for good papers

Announcing the call for papers for #ECIR2026 IR-for-Good Track: ecir2026.eu/calls/call-f...

Abstracts due: Oct 21
Papers due: Oct 28

This year, we are revamping the #IR4Good track as a core track at the conference. A short thread on the changes we are introducing this year... ๐Ÿงต
1/

25.08.2025 21:10 โ€” ๐Ÿ‘ 5    ๐Ÿ” 2    ๐Ÿ’ฌ 1    ๐Ÿ“Œ 2
Post image Post image

I was interviewed for the Dutch newspaper NRC. The article (about Grok) came out 2 weeks ago. Yesterday (back from vacation) I and found the paper copy

Kudos to Toon Beemsterboer who asked critical questions and gave me space to explain the steps of LLM-chatbot training

www.nrc.nl/nieuws/2025/...

10.08.2025 13:38 โ€” ๐Ÿ‘ 3    ๐Ÿ” 0    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 0
Preview
ECIR2026 The 48th European Conference on Information Retrieval (ECIR 2026) is Europe's premier forum for cutting-edge research in

๐Ÿ“ข The website for ECIR 2026 is live โ€“ and so is our first call for papers!

๐Ÿ”— ecir2026.eu
๐Ÿ“ Delft, The Netherlands
๐Ÿ—“๏ธ March 30 โ€“ April 1, 2026 (main conference)
๐ŸŽ“ Tutorials: March 29
๐Ÿ›  Workshops: April 2

02.08.2025 06:07 โ€” ๐Ÿ‘ 6    ๐Ÿ” 4    ๐Ÿ’ฌ 1    ๐Ÿ“Œ 2
Preview
Use of diverse data sources to control which topics emerge in a science map

Today's MetaROR paper discusses "the use of document data networks to control the topic clustering of a science map" with "rigorous methodology" & "careful presentation".

Reviewers consider it "a valuable contribution to the literature", and provide the authors detailed feedback.

๐Ÿ‘‡ Read on MetaROR

16.07.2025 15:35 โ€” ๐Ÿ‘ 3    ๐Ÿ” 3    ๐Ÿ’ฌ 2    ๐Ÿ“Œ 1

๐ŸŽ‰ Exciting news for #SIGIRAP2025! This year, we're continuing our tradition of offering both face-to-face and remote participation options. Remote presentations are fully supported! Join us to participate from anywhere! ๐Ÿ“ก #HybridConference

07.07.2025 03:58 โ€” ๐Ÿ‘ 4    ๐Ÿ” 2    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 2
Preview
Stemadvies van ChatGPT? Een kwart van de Nederlanders staat ervoor open Mensen solliciteren, maken muziek en boeken zelfs complete vakanties via chatbots zoals ChatGPT of Gemini. Deze AI-hulpmiddelen zijn bezig met een gestage opmars en lijken ook meer en meer gebruikt te...

Gisteren was ik te zien in het SBS6-programma Hart van Nederland over het gebruik van chatbots voor stemadvies. Ik had OpenVerkiezingen nog even geplugd maar dat heeft de uitzending niet gehaald :)

www.hartvannederland.nl/tech/ai/arti...

01.07.2025 18:00 โ€” ๐Ÿ‘ 1    ๐Ÿ” 0    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 0
Foto van een lege Commissiezaal in de Tweede Kamer: een grijze zaal met een halfronde cirkel met tafels. Links in een hoek zit in, aan de andere kant van de tafel staan Thibault en Thijs. Foto is wat van een afstand genomen zodat de leegte goed in beeld is.

Foto van een lege Commissiezaal in de Tweede Kamer: een grijze zaal met een halfronde cirkel met tafels. Links in een hoek zit in, aan de andere kant van de tafel staan Thibault en Thijs. Foto is wat van een afstand genomen zodat de leegte goed in beeld is.

Screenshot van de site van de NOS: met Yesilgoz, Van der Plas en Van Vroonhoven die worden geรฏnterviewd door diverse journalisten met gekleurde microfoons. Daaronder de kop: asielportefeuille verdeeld over drie ministers van VVD, NSC en BBB.

Screenshot van de site van de NOS: met Yesilgoz, Van der Plas en Van Vroonhoven die worden geรฏnterviewd door diverse journalisten met gekleurde microfoons. Daaronder de kop: asielportefeuille verdeeld over drie ministers van VVD, NSC en BBB.

Politieke prioriteiten in plaatjes.

Links de zaal waarin het debat over gehandicaptenbeleid zou plaatsvinden.

13.06.2025 06:36 โ€” ๐Ÿ‘ 960    ๐Ÿ” 298    ๐Ÿ’ฌ 62    ๐Ÿ“Œ 34
DIR 2025

#DIR2025, the 22nd Dutch-Belgian Information Retrieval workshop will take place at Radboud University Nijmegen on 27 October 2025!

https://informagus.nl/dir2025/

06.06.2025 09:07 โ€” ๐Ÿ‘ 5    ๐Ÿ” 8    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 0
Preview
Deskundigen: karakter van 'controlfreak' Wilders staat samenwerking in de weg Wilders zegt zelf dat hij de stekker eruit trok vanwege het gebrek aan daadkracht op het thema migratie. Deskundigen en een oud-PVV'er wijten het ook aan zijn 'wantrouwende karakter'.

Mag hopen dat ook zijn rabiate racisme en fascisme samenwerking in de weg staan.

05.06.2025 06:56 โ€” ๐Ÿ‘ 51    ๐Ÿ” 13    ๐Ÿ’ฌ 6    ๐Ÿ“Œ 2

If, due to exceptional circumstances, you are not able to travel to Padua for #SIGIR2025 to present your paper, please contact us at sigir2025-pp@dei.unipd.it on May 30th the latest to discuss possible solutions.

sigir2025.dei.unipd.it/inpresence-p...

26.05.2025 11:40 โ€” ๐Ÿ‘ 3    ๐Ÿ” 1    ๐Ÿ’ฌ 0    ๐Ÿ“Œ 0

Israรซl is bezig met de totale vernietiging van de bevolking van Gaza. Wie niet sterft door de bommen, sterft door uithongering. Wie het waagt Palestijnen te hulp te schieten, wordt gebombardeerd. Het niet ingrijpen van de wereld is een politieke keuze. Wat een moreel failliet.

02.05.2025 14:48 โ€” ๐Ÿ‘ 549    ๐Ÿ” 256    ๐Ÿ’ฌ 26    ๐Ÿ“Œ 11
Preview
Gaza humanitarian aid ship โ€˜bombed by dronesโ€™ in waters off Malta Freedom Flotilla Coalition claims Israel to blame for attack on unarmed civilian vessel in international waters

Misschien heb je dit nieuws gemist, want het stond slechts als kort berichtje in de NOS-liveblog: een schip met burgers die hulp naar Gaza wilden brengen, is in internationale wateren beschoten door drones. Greta Thunberg zou ook meevaren.
www.theguardian.com/world/2025/m...

02.05.2025 19:24 โ€” ๐Ÿ‘ 142    ๐Ÿ” 71    ๐Ÿ’ฌ 11    ๐Ÿ“Œ 2

Of course.
But I hadnโ€™t understood your message was about that concern. It seemed to be about genAI not being impressive.

22.04.2025 16:56 โ€” ๐Ÿ‘ 1    ๐Ÿ” 0    ๐Ÿ’ฌ 1    ๐Ÿ“Œ 0
Post image

In Retrieval-Augmented Generation (RAG) the sources are retrieved before generation. The parametric knowledge is fixed, but external sources are retrieved to base the response on. This helps the user verify the information. See en.wikipedia.org/wiki/Retriev... Example:

21.04.2025 14:24 โ€” ๐Ÿ‘ 0    ๐Ÿ” 0    ๐Ÿ’ฌ 1    ๐Ÿ“Œ 0

@suzanv is following 20 prominent accounts