Evaluating Code Generation and Benchmark Quality using LLM-as-a-Judge

MANANDHAR, PRAGATI
2025/2026

2025
Evaluating Code Generation and Benchmark Quality using LLM-as-a-Judge
File in questo prodotto:
File Dimensione Formato  
PragatiManandhar_297913_Thesis.pdf

accesso solo dalla rete interna

Descrizione: This thesis uses LLM-as-a-Judge to evaluate six code-generation models on HumanEval and HumanEvalNext, and to audit the quality of the benchmarks themselves with four judge models. Results are mixed, with no consistent gain on HumanEvalNext.
Dimensione 1.69 MB
Formato Adobe PDF
1.69 MB Adobe PDF   Contatta l'autore

I documenti in UNITESI sono protetti da copyright e tutti i diritti sono riservati, salvo diversa indicazione.
Il download dei file è consentito soltanto per chi si collega da rete interna o da proxy.

Utilizza questo identificativo per citare o creare un link a questo documento: https://hdl.handle.net/20.500.12319/27791