Llama 4 Maverick 17B 128E Instruct | PolishLawLLM Benchmark

Interpretacja Orzecznictwa

Zdolność do identyfikacji zamaskowanych przepisów w treści uzasadnień sądowych.

Legal Basis

31%

Exact Match

Rouge N

0.11

Rouge N Tfidf

0.08

Rouge W

0.13

Egzaminy Zawodowe

Wyniki na egzaminach wstępnych na aplikacje prawnicze.

Answer

76%

Legal Basis

Exact Match

Rouge N

0.55

Rouge N Tfidf

0.58

Rouge W

0.55

Wyniki wg typu egzaminu i roku

Typ Egzaminu	Rok	Answer	Legal Basis	Exact Match	Rouge N	Rouge N Tfidf	Rouge W
adwokacki_radcowy	2016	74%	12%	5%	0.55	0.55	0.53
adwokacki_radcowy	2017	72%	14%	5%	0.47	0.48	0.47
adwokacki_radcowy	2018	82%	10%	6%	0.52	0.53	0.53
adwokacki_radcowy	2019	77%	11%	11%	0.63	0.67	0.64
adwokacki_radcowy	2020	75%	9%	3%	0.51	0.57	0.50
adwokacki_radcowy	2021	76%	11%	11%	0.64	0.67	0.64
adwokacki_radcowy	2022	74%	7%	9%	0.59	0.62	0.58
adwokacki_radcowy	2023	72%	6%	6%	0.48	0.51	0.47
adwokacki_radcowy	2024	86%	13%	9%	0.60	0.63	0.59
adwokacki_radcowy	2025	75%	14%	8%	0.54	0.58	0.54
komorniczy	2016	75%	5%	12%	0.55	0.60	0.57
komorniczy	2017	80%	4%	12%	0.61	0.64	0.61
komorniczy	2018	77%	7%	7%	0.53	0.54	0.53
komorniczy	2019	77%	10%	6%	0.48	0.52	0.49
komorniczy	2020	74%	4%	9%	0.52	0.55	0.53
komorniczy	2021	78%	8%	10%	0.57	0.60	0.57
komorniczy	2022	76%	7%	13%	0.59	0.63	0.59
komorniczy	2023	79%	11%	21%	0.62	0.67	0.62
komorniczy	2024	82%	9%	12%	0.59	0.63	0.59
komorniczy	2025	78%	11%	12%	0.59	0.66	0.59
notarialny	2016	83%	9%	9%	0.52	0.53	0.52
notarialny	2017	66%	5%	11%	0.52	0.50	0.51
notarialny	2018	74%	6%	11%	0.57	0.57	0.57
notarialny	2019	68%	12%	3%	0.55	0.56	0.55
notarialny	2020	58%	5%	2%	0.43	0.46	0.45
notarialny	2021	79%	7%	4%	0.51	0.50	0.52
notarialny	2022	78%	19%	8%	0.52	0.53	0.52
notarialny	2023	77%	7%	13%	0.56	0.59	0.55
notarialny	2024	81%	7%	13%	0.60	0.61	0.59
notarialny	2025	80%	6%	13%	0.54	0.54	0.54

Interpretacja Orzecznictwa

Zdolność do identyfikacji zamaskowanych przepisów w treści uzasadnień sądowych.

Legal Basis

31%

Exact Match

Rouge N

0.11

Rouge N Tfidf

0.08

Rouge W

0.13

Egzaminy Zawodowe

Wyniki na egzaminach wstępnych na aplikacje prawnicze.

Answer

76%

Legal Basis

Exact Match

Rouge N

0.55

Rouge N Tfidf

0.58

Rouge W

0.55

Wyniki wg typu egzaminu i roku

Typ Egzaminu	Rok	Answer	Legal Basis	Exact Match	Rouge N	Rouge N Tfidf	Rouge W
adwokacki_radcowy	2016	74%	12%	5%	0.55	0.55	0.53
adwokacki_radcowy	2017	72%	14%	5%	0.47	0.48	0.47
adwokacki_radcowy	2018	82%	10%	6%	0.52	0.53	0.53
adwokacki_radcowy	2019	77%	11%	11%	0.63	0.67	0.64
adwokacki_radcowy	2020	75%	9%	3%	0.51	0.57	0.50
adwokacki_radcowy	2021	76%	11%	11%	0.64	0.67	0.64
adwokacki_radcowy	2022	74%	7%	9%	0.59	0.62	0.58
adwokacki_radcowy	2023	72%	6%	6%	0.48	0.51	0.47
adwokacki_radcowy	2024	86%	13%	9%	0.60	0.63	0.59
adwokacki_radcowy	2025	75%	14%	8%	0.54	0.58	0.54
komorniczy	2016	75%	5%	12%	0.55	0.60	0.57
komorniczy	2017	80%	4%	12%	0.61	0.64	0.61
komorniczy	2018	77%	7%	7%	0.53	0.54	0.53
komorniczy	2019	77%	10%	6%	0.48	0.52	0.49
komorniczy	2020	74%	4%	9%	0.52	0.55	0.53
komorniczy	2021	78%	8%	10%	0.57	0.60	0.57
komorniczy	2022	76%	7%	13%	0.59	0.63	0.59
komorniczy	2023	79%	11%	21%	0.62	0.67	0.62
komorniczy	2024	82%	9%	12%	0.59	0.63	0.59
komorniczy	2025	78%	11%	12%	0.59	0.66	0.59
notarialny	2016	83%	9%	9%	0.52	0.53	0.52
notarialny	2017	66%	5%	11%	0.52	0.50	0.51
notarialny	2018	74%	6%	11%	0.57	0.57	0.57
notarialny	2019	68%	12%	3%	0.55	0.56	0.55
notarialny	2020	58%	5%	2%	0.43	0.46	0.45
notarialny	2021	79%	7%	4%	0.51	0.50	0.52
notarialny	2022	78%	19%	8%	0.52	0.53	0.52
notarialny	2023	77%	7%	13%	0.56	0.59	0.55
notarialny	2024	81%	7%	13%	0.60	0.61	0.59
notarialny	2025	80%	6%	13%	0.54	0.54	0.54