Page generated: 2026-08-27
Data (model runs) generated: 2026-07-23
Scoring inputs: ground truth 36c390d2, evaluate.py 5c52b890, rules 355f2e77

Page 39 — AVS IS 758-781 1770 08.jpg

ClaudeGPTGemini 2.5Gemini 3.1Claude Thinking

F1 is the harmonic mean of the other two, so read precision and recall to see which side moved. Precision = matched / rows the model emitted, falling when it invents or duplicates rows; recall = matched / ground-truth travelers, falling when it misses or misreads them. N = image only, A = + expert guidance, B = + guidance and full transcription. Each point is the mean over the 10 runs; whiskers span min to max across those runs, and are absent where all ten runs scored identically. The per-phase sections below quote the best run, so those figures are higher and are not directly comparable.

Date: 20 August 1770 (standard year: 1770)
Notes:

Ground truth

GT (10 travelers)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolò ?lelingen	Maggiore	August 13 1770		Casa di Bon Darij Santi Apostoli	N	N	Svizzero
2	William Cotton	Mons.	August 13 1770		Casa di Bon Darij Santi Apostoli	N	N	Inglese
3	Tomaso Wodehouse	Mons.	August 13 1770		Casa di Bon Darij Santi Apostoli	N	N	Inglese
4	Antonio Alberti	Cornetta	August 15 1770		Alla Cortesia Sant'Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria San Paternian	N	N	Sassonia
6	Federico ?gorosd		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Ucrania
7	Ferdinando Zotta		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Verona
8	Giovanni Battista Maffoni		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Cà Feltrina Santa Maria Zobenigo	N	N	Dalmatiao
10	Giovanni Maria Scetti	Conte		August 15 1770	Alla Cortesia Sant'Angelo	N	N	Bergamo

Phase N — naive (no guidance, no transcription) — best run per model

claude (run 01, F1=0.80)

#	name	title	arrival_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Nicolo Kilminger	Mons.	18 Agosto	Scudo di Francia con un Domestico	N	N	Svizzero al Servizio del Re di Prussia
2	William Cotton	Mons.	18 Agosto	Casa di Bon Barj in S. Christoli	N	N	Inglese
3	Tomaso Wolseleye	Mons.	18 Agosto	Casa di Bon Barj in S. Christoli	N	N	Inglese
4	Antonio Albori	Conte	15	Cortesia S. Angelo	N	N	Schio
5	Baissen	Barone	10	Regina d'Ungheria S. Salvator	N	N	Sassonia
6	Henrico Sporoni		10	Posta della Verona S. Fantia	N	N	Vicenza
7	Ferdinando Seta		10	Posta della Verona S. Fantia	N	N	Verona
8	Giovanni Batta Maffoni		10	Posta della Verona S. Fantia	N	N	Brescia
9	Carlo Paulovich		11 Agosto	Cortesia S. Maria Zobenigo	N	N	Dalmatino
10	Gio. Maria Scotti	Co.	15	Cortesia S. Angelo	N	N	Bergamo

gpt (run 04, F1=0.53)

#	name	title	arrival_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Sig.r Federico N. Hollenzen	Sig.r	13. Gbr	In San Bastian da rio in S. Cassan	N	N	Svezera
2	Sig.r William Patton	Sig.r	0 moy	In San Bastian da rio in S. Cassan	N	N	Inglese
3	Sig.r Tomayo H. Lebreye	Sig.r	moy	In San Bastian da rio in S. Cassan	N	N	Inglese
4	Il Cav.re Bressa di	Il Cav.re	11 9bre	Alla Regina d'Inghilterra S. Zulian	N	N	Sassonia
5	Federico Egon de la		4	Alla loc: della Verona S. Lando	N	N	Livonia
6	Ferdinando Porta di			Alla loc: della Verona S. Lando	N	N	Verona
7	Giovanni Bati Massoni di			Alla loc: della Verona S. Lando	N	N	Brescia
8	Carlo Roubich		11 Gbr	Alla loc: Pelarina S. Maria Zobenigo	N	N	Dalmata
9	Il Sig.r Gio: Maria Sessi	Il Sig.r		Alla foresteria di S. Angelo	N	N	Bergamo

gemini (run 01, F1=0.70)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Nicolò Schlaingen	Ill.mo Sig.r	18 Agosto 1770			N	N	Svizzero
2	Millianj Potton	Mons.r	18 Agosto 1770		In Casa di Bon Savizjoc in S.ti Apostoli	N	N	Inglesi
3	Tomaso Milsheye	Mons.r	18 Agosto 1770		In Casa di Bon Savizjoc in S.ti Apostoli	N	N	Inglesi
4	Antonio Olivi	Il Marchese	19 Agosto 1770		Alla Posta in S. Angelo	N	N	Schio
5	Beissen	Il Barone	20 Agosto 1770		Alla Regina d'Ungheria S. Pantalon	N	N	Sassonia
6	Lodovico Egovosi		21 Agosto 1770		Alla Foci della Tiziana S. Fantin	N	N	Carnia
7	Ludovico Gorta		21 Agosto 1770		Alla Foci della Tiziana S. Fantin	N	N	Verona
8	Giovanni Bata Mafanili		21 Agosto 1770		Alla Foci della Tiziana S. Fantin	N	N	Brescia
9	Carlo Pacizich		11 Agosto 1770	19 Agosto 1770	in S.a Giustina all'Ospizio	N	N	Dalmatino
10	Gio: Maria Scotti	Il Co:	13 Agosto 1770	19 Agosto 1770	in Casa di q.l Seg.r all'Ospizio	N	N	Bergamo

gemini31 (run 01, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Nicolo Deblaingen	Sig:	13 Agto		al Servitio del Re di Prussia	N	N	Svizzero
2	William Cotton	Mons:	13 Agto		In Casa di Ben Danijel in S.ti Apostoli	N	N	Inglesi
3	Tomaso Wodehouse	Mons:	13 Agto		In Casa di Ben Danijel in S.ti Apostoli	N	N	Inglesi
4	Antonio Alberti	Il Cornetta	15 d:o		Alla Cortesia S.t Angelo	N	N	Schio
5	Baissen	Il Barone	16 d:o		Alla Regina d'Ungheria S. Paternian	N	N	Sassonia
6	Federico Egovesi		16 d:o		Alla Loc:a della Corona S. Cantian	N	N	Carniola
7	Ferdinando Cotta		16 d:o		Alla Loc:a della Corona S. Cantian	N	N	Verona
8	Giovanni Batta Massoni		16 d:o		Alla Loc:a della Corona S. Cantian	N	N	Brescia
9	Carlo Paulovich			11 Agto	Alla Cà Feltrina Sta Maria Zobenigo	N	N	Dalmatino
10	Gio: Maria Scotti	Il Co:		15 d:o	Alla Cortesia S.t Angelo	N	N	Bergamo

claude_thinking (run 03, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Nicolò d'Elzingen	Sig.	18 Agosto 1770		al Sovrzsto del Re di Prussia	N	N	Svizzero
2	William Cotton	Mons.	18 Agosto 1770		In Casa di Bon Dary in SS. Apostoli	N	N	Inglese
3	Tomaso Wolseley	Mons.	18 Agosto 1770		In Casa di Bon Dary in SS. Apostoli	N	N	Inglese
4	Antonio Alberus	Signor	19 Agosto 1770		Alla Cortesia S. Angelo	N	N	Schio
5	Baissen	Barone	20 Agosto 1770		Alla Regina d'Ungheria S. Paternian	N	N	Sassonia
6	Henrico Sgorosi		21 Agosto 1770		Alla Loca della Verona S. Canzia	N	N	Curonia
7	Ferdinando Spezio		21 Agosto 1770		Alla Loca della Verona S. Canzia	N	N	Verona
8	Giovanni Batta Maffei		21 Agosto 1770		Alla Loca della Verona S. Canzia	N	N	Brescia
9	Carlo Pautrovich			13 Agosto 1770	Alla Ca' Vedrora S.ta Maria Zobenigo	N	N	Dalmatino
10	Gio. Maria Scotti	Co.		14 Agosto 1770	Alla Cortesia S. Angelo	N	N	Bergamo

Phase A — guided (image + expert guidance) — best run per model

claude (run 01, F1=0.80)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolo Kilminger		August 18 1770		al Servizio del Re di Prussia	N	N	Svizzero
2	William Patton	Monsieur	August 18 1770		In Casa di Bon Darif in S. Christofolo	N	N	Inglese
3	Tomaso Wolseleye	Monsieur	August 18 1770		In Casa di Bon Darif in S. Christofolo	N	N	Inglese
4	Antonio Alberto	Conte	August 15 1770		Alla Cortesia S. Angelo	N	N	Schio
5	Baissen	Barone	August 10 1770		Alla Regina d'Ungheria S. Paternian	N	N	Sassonia
6	Henrico Sporoni		August 10 1770		Alla Posta bella Vienna S. Fantia	N	N	Lucania
7	Ferdinando Seta		August 10 1770		Alla Posta bella Vienna S. Fantia	N	N	Verona
8	Giovanni Batta Maffoni		August 10 1770		Alla Posta bella Vienna S. Fantia	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Ca' Pestiora S. Maria Zobenigo	N	N	Dalmatino
10	Gio. Maria Scotti	Conte		August 15 1770	Alla Cortesia S. Angelo	N	N	Bergamo

gpt (run 03, F1=0.50)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Federico N. Vahlbergsen		May 13 1770		a S. Servolo del N. di Russia	N	N	Svezia
2	William Patton		May 20 1770		In casa di S. Dandolo in S. Cassan	N	N	Inglesi
3	Tomayo H. Lebreye		May 20 1770		In casa di S. Dandolo in S. Cassan	N	N	Inglesi
4	Il Cavaliere Vasseni	Cavaliere			Calle Parigia S. Angelo	N	N	Scio
5	Il Barone Bassa	Barone			Calle Regina d'Ungheria	N	N	Sassonia
6	Federico Grover de la				Alla loc. della Verona (S. Cancian)	N	N	Livonia
7	Il Dottorando Porta	Dottorando			Alla loc. della Verona (S. Cancian)	N	N	Verona
8	Giovanni Batti Massoni				Alla loc. della Verona (S. Cancian)	N	N	Brescia
9	Carlo Roubich			May 11 1770	Calle Ca' Pelosa in S. Maria Zobenigo	N	N	Dalmatia
10	Il Sig. Gio. Maria Sessi	Sig.			Calle Parigia S. Angelo	N	N	Bergamo

gemini (run 01, F1=0.70)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Nicolò Schlaingen	Sig.r	August 18 1770			N	N	Svizzero
2	William Beton	Mons.r	August 18 1770		In Casa di Bon Savizoc in S.S. Apostoli	N	N	Inglese
3	Tomaso Welsheye	Mons.r	August 18 1770		In Casa di Bon Savizoc in S.S. Apostoli	N	N	Inglese
4	Panacha Clatonio Olthus	Sig.r	August 18 1770		Alla Posta in S. Angelo	N	N	di Schio
5	Beissen	Barone	August 19 1770		Alla Regina d'Ungheria S. Pantalon	N	N	Sassonia
6	Lodovico Egovost		August 19 1770		Alla Focabella S. Fantin	N	N	Ucrania
7	Ludovico Gatta		August 19 1770		Alla Focabella S. Fantin	N	N	Verona
8	Giovanni Battista Mafanili		August 19 1770		Alla Focabella S. Fantin	N	N	Brescia
9	Carlo Paulovich			August 11 1770	dalla Loc.a del Gallo Alla Fava in S.ta Maria Zobenigo	N	N	Dalmatino
10	Giovanni Maria Scotti	Sig.r		August 15 1770	dalla Loc.a di S. Giorgio S. Angelo	N	N	Bergamo

gemini31 (run 01, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Nicolo Veblaingen	Maggiore	August 13 1770		al Servizio del Re di Prussia	N	N	Svizzero
2	William Cotton	Monsieur	August 13 1770		In Casa di Ben Sanjoc in S.ti Apostoli	N	N	Inglesi
3	Tomaso Wodehouse	Monsieur	August 13 1770		In Casa di Ben Sanjoc in S.ti Apostoli	N	N	Inglesi
4	Antonio Alberti	Signor	August 15 1770		Alla Cortesia S.t Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria S. Paternian	N	N	Sassonia
6	Federico Egovest		August 16 1770		Alla Locanda della Verona S. Cantian	N	N	Carania
7	Ferdinando Cotta		August 16 1770		Alla Locanda della Verona S. Cantian	N	N	Verona
8	Giovanni Batta Massoni		August 16 1770		Alla Locanda della Verona S. Cantian	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Cà Feltrina Sta Maria Zobenigo	N	N	Dalmatino
10	Gio: Maria Scotti	Conte		August 15 1770	Alla Cortesia S.t Angelo	N	N	Bergamo

claude_thinking (run 05, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolò di Lelingen	Sig.	August 13 1770		al Scudo di Francia	N	N	Svizzero
2	Williams Goton	Mons.	August 13 1770		In Casa di Bon Barip in St. Christal	N	N	Inglese
3	Tomaso Molshouye	Mons.	August 13 1770		In Casa di Bon Barip in St. Christal	N	N	Inglese
4	Antonio Alberto	Conte	August 15 1770		Alla Cortesia St. Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria S. Valvalan	N	N	Sassonia
6	Henrico Sporodi		August 18 1770		Alla Loca bella Verona S. Candia	N	N	Curlandia
7	Ferdinando Soto		August 18 1770		Alla Loca bella Verona S. Candia	N	N	Ferrara
8	Giovanni Batta Mafferi		August 18 1770		Alla Loca bella Verona S. Candia	N	N	Brescia
9	Carlo Pasbroich			August 11 1770	Alla Ca Geltina St.a Maria Codenigo	N	N	Dalmatino
10	Gio. Maria Serto	Ca.		August 15 1770	Alla Cortesia St. Angelo	N	N	Bergamo

Phase B — guided + transcription — best run per model

claude (run 01, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolò Flelingen	Maggiore	August 13 1770		In Casa di Bon Darij	N	N	Svizzero
2	William Cotton	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglese
3	Tomaso Wodehouse	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglese
4	Antonio Alberti	Cornetta	August 15 1770		Alla Cortesia Sant'Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria, San Paternian	N	N	Sassonia
6	Federico Gorosd		August 20 1770		Alla Locanda della Verona, San Fantin	N	N	Ucrania
7	Ferdinando Zotta		August 20 1770		Alla Locanda della Verona, San Fantin	N	N	Verona
8	Giovanni Battista Maffoni		August 20 1770		Alla Locanda della Verona, San Fantin	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Cà Feltrina Santa Maria Zobenigo	N	N	Dalmatino
10	Giovanni Maria Scetti	Conte		August 14 1770	Alla Cortesia Sant'Angelo	N	N	Bergamo

gpt (run 01, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolò ?lelingen	Maggiore	August 13 1770		In casa di Bon Darij	N	N	Svizzero
2	William Cotton	Monsignor	August 13 1770		In casa di Bon Darij	N	N	Inglese
3	Tomaso Wodehouse	Monsignor	August 13 1770		In casa di Bon Darij	N	N	Inglese
4	Antonio Alberti	Cornetta	August 15 1770		Alla Cortesia, S. Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria, S. Paternian	N	N	Sassonia
6	Federico ?gorosd		August 20 1770		Alla locanda della Verona, S. Fantin	N	N	Ucrania
7	Ferdinando Zotta		August 20 1770		Alla locanda della Verona, S. Fantin	N	N	Verona
8	Giovanni Battista Maffoni		August 20 1770		Alla locanda della Verona, S. Fantin	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Cà Feltrina, S. Maria Zobenigo	N	N	Dalmatiao
10	Giovanni Maria Scetti	Conte		August 14 1770	Alla Cortesia, S. Angelo	N	N	Bergamo

gemini (run 01, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolò ?lelingen	Maggiore	August 13 1770		In Casa di Bon Darij	N	N	Svizzero
2	William Cotton	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglesi
3	Tomaso Wodehouse	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglesi
4	Antonio Alberti	Cornetta	August 15 1770		Alla Cortesia Sant'Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria San Paternian	N	N	Sassonia
6	Federico ?gorosd		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Ucrania
7	Ferdinando Zotta		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Verona
8	Giovanni Battista Maffoni		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Cà Feltrina Santa Maria Zobenigo	N	N	Dalmatiao
10	Giovanni Maria Scetti	Conte		August 15 1770	Alla Cortesia Sant'Angelo	N	N	Bergamo

gemini31 (run 01, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolò ?lelingen	Maggiore	August 13 1770		In Casa di Bon Darij	N	N	Svizzero
2	William Cotton	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglesi
3	Tomaso Wodehouse	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglesi
4	Antonio Alberti	Cornetta	August 15 1770		Alla Cortesia Sant'Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria San Paternian	N	N	Sassonia
6	Federico ?gorosd		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Ucrania
7	Ferdinando Zotta		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Verona
8	Giovanni Battista Maffoni		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Cà Feltrina Santa Maria Zobenigo	N	N	Dalmatiao
10	Giovanni Maria Scetti	Conte		August 14 1770	Alla Cortesia Sant'Angelo	N	N	Bergamo

claude_thinking (run 01, F1=1.00)

#	name	title	arrival_date	departure_date	place_of_stay	with_spouse	with_siblings	place_of_origin
1	Niccolò ?lelingen	Maggiore	August 13 1770		In Casa di Bon Darij	N	N	Svizzero
2	William Cotton	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglese
3	Tomaso Wodehouse	Monsignor	August 13 1770		In Casa di Bon Darij	N	N	Inglese
4	Antonio Alberti	Cornetta	August 15 1770		Alla Cortesia Sant'Angelo	N	N	Schio
5	Baissen	Barone	August 16 1770		Alla Regina d'Ungheria San Paternian	N	N	Sassonia
6	Federico ?gorosd		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Ucrania
7	Ferdinando Zotta		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Verona
8	Giovanni Battista Maffoni		August 20 1770		Alla Locanda della Verona San Fantin	N	N	Brescia
9	Carlo Paulovich			August 11 1770	Alla Cà Feltrina Santa Maria Zobenigo	N	N	Dalmatiao
10	Giovanni Maria Scetti	Conte		August 14 1770	Alla Cortesia Sant'Angelo	N	N	Bergamo