DeepSeek v3.2 | PolishLawLLM Benchmark

Interpretacja Orzecznictwa

Zdolność do identyfikacji zamaskowanych przepisów w treści uzasadnień sądowych.

Legal Basis

29%

Exact Match

Rouge N

0.17

Rouge N Tfidf

0.16

Rouge W

0.18

Egzaminy Zawodowe

Wyniki na egzaminach wstępnych na aplikacje prawnicze.

Answer

77%

Legal Basis

Exact Match

18%

Rouge N

0.62

Rouge N Tfidf

0.63

Rouge W

0.61

Wyniki wg typu egzaminu i roku

Typ Egzaminu	Rok	Answer	Legal Basis	Exact Match	Rouge N	Rouge N Tfidf	Rouge W
adwokacki_radcowy	2016	72%	5%	14%	0.60	0.61	0.58
adwokacki_radcowy	2017	73%	1%	12%	0.54	0.54	0.55
adwokacki_radcowy	2018	76%	7%	6%	0.57	0.58	0.56
adwokacki_radcowy	2019	75%	13%	23%	0.66	0.68	0.66
adwokacki_radcowy	2020	71%	9%	22%	0.63	0.68	0.63
adwokacki_radcowy	2021	79%	8%	32%	0.72	0.74	0.73
adwokacki_radcowy	2022	74%	10%	21%	0.68	0.69	0.65
adwokacki_radcowy	2023	74%	2%	17%	0.59	0.60	0.58
adwokacki_radcowy	2024	86%	14%	18%	0.63	0.65	0.63
adwokacki_radcowy	2025	76%	15%	15%	0.61	0.61	0.61
komorniczy	2016	72%	4%	14%	0.61	0.67	0.61
komorniczy	2017	80%	4%	23%	0.67	0.73	0.66
komorniczy	2018	77%	5%	21%	0.65	0.64	0.64
komorniczy	2019	82%	4%	15%	0.59	0.62	0.59
komorniczy	2020	78%	18%	22%	0.61	0.63	0.61
komorniczy	2021	79%	5%	17%	0.59	0.63	0.59
komorniczy	2022	79%	4%	15%	0.64	0.63	0.63
komorniczy	2023	81%	16%	26%	0.63	0.66	0.62
komorniczy	2024	79%	9%	26%	0.68	0.69	0.68
komorniczy	2025	77%	6%	18%	0.66	0.70	0.65
notarialny	2016	81%	9%	13%	0.60	0.59	0.57
notarialny	2017	73%	5%	11%	0.51	0.49	0.51
notarialny	2018	71%	5%	16%	0.62	0.62	0.61
notarialny	2019	79%	7%	15%	0.63	0.64	0.61
notarialny	2020	57%	7%	12%	0.59	0.59	0.59
notarialny	2021	77%	9%	11%	0.56	0.56	0.56
notarialny	2022	78%	8%	24%	0.62	0.62	0.62
notarialny	2023	74%	5%	15%	0.60	0.65	0.59
notarialny	2024	85%	3%	15%	0.61	0.61	0.60
notarialny	2025	78%	6%	16%	0.62	0.64	0.61

Interpretacja Orzecznictwa

Zdolność do identyfikacji zamaskowanych przepisów w treści uzasadnień sądowych.

Legal Basis

29%

Exact Match

Rouge N

0.17

Rouge N Tfidf

0.16

Rouge W

0.18

Egzaminy Zawodowe

Wyniki na egzaminach wstępnych na aplikacje prawnicze.

Answer

77%

Legal Basis

Exact Match

18%

Rouge N

0.62

Rouge N Tfidf

0.63

Rouge W

0.61

Wyniki wg typu egzaminu i roku

Typ Egzaminu	Rok	Answer	Legal Basis	Exact Match	Rouge N	Rouge N Tfidf	Rouge W
adwokacki_radcowy	2016	72%	5%	14%	0.60	0.61	0.58
adwokacki_radcowy	2017	73%	1%	12%	0.54	0.54	0.55
adwokacki_radcowy	2018	76%	7%	6%	0.57	0.58	0.56
adwokacki_radcowy	2019	75%	13%	23%	0.66	0.68	0.66
adwokacki_radcowy	2020	71%	9%	22%	0.63	0.68	0.63
adwokacki_radcowy	2021	79%	8%	32%	0.72	0.74	0.73
adwokacki_radcowy	2022	74%	10%	21%	0.68	0.69	0.65
adwokacki_radcowy	2023	74%	2%	17%	0.59	0.60	0.58
adwokacki_radcowy	2024	86%	14%	18%	0.63	0.65	0.63
adwokacki_radcowy	2025	76%	15%	15%	0.61	0.61	0.61
komorniczy	2016	72%	4%	14%	0.61	0.67	0.61
komorniczy	2017	80%	4%	23%	0.67	0.73	0.66
komorniczy	2018	77%	5%	21%	0.65	0.64	0.64
komorniczy	2019	82%	4%	15%	0.59	0.62	0.59
komorniczy	2020	78%	18%	22%	0.61	0.63	0.61
komorniczy	2021	79%	5%	17%	0.59	0.63	0.59
komorniczy	2022	79%	4%	15%	0.64	0.63	0.63
komorniczy	2023	81%	16%	26%	0.63	0.66	0.62
komorniczy	2024	79%	9%	26%	0.68	0.69	0.68
komorniczy	2025	77%	6%	18%	0.66	0.70	0.65
notarialny	2016	81%	9%	13%	0.60	0.59	0.57
notarialny	2017	73%	5%	11%	0.51	0.49	0.51
notarialny	2018	71%	5%	16%	0.62	0.62	0.61
notarialny	2019	79%	7%	15%	0.63	0.64	0.61
notarialny	2020	57%	7%	12%	0.59	0.59	0.59
notarialny	2021	77%	9%	11%	0.56	0.56	0.56
notarialny	2022	78%	8%	24%	0.62	0.62	0.62
notarialny	2023	74%	5%	15%	0.60	0.65	0.59
notarialny	2024	85%	3%	15%	0.61	0.61	0.60
notarialny	2025	78%	6%	16%	0.62	0.64	0.61