TasaractDavut Emre Taşar
Indietro
Dataset

TARA · Ragionamento in turco

Come si valuta il ragionamento di un modello linguistico in turco?

TARA v1 contiene 100 coppie sintetiche di domande e risposte in turco, una per ogni combinazione di dieci ambiti e dieci livelli di difficoltà. Per ogni problema il modello riceve una domanda e un testo di supporto. Una risposta di riferimento e criteri di valutazione espliciti chiariscono cosa conta come successo, dallo scrivere una query SQL per un dato schema al creare un racconto rispettando vincoli precisi.

Titolo originale

TARA: Turkish Advanced Reasoning Assessment Dataset

Documenti originali

Fonte originale · huggingface.co doi.org
Citazione

Davut Emre Taşar, Ceren Öcal Taşar · TARA: Turkish Advanced Reasoning Assessment Dataset · 2025 · 10.57967/hf/5193 · https://huggingface.co/datasets/emre/TARA_Turkish_LLM_Benchmark