2025 · Kamuya açık araştırma veri kümesi · Sürüm 1

TARA: Turkish Advanced Reasoning Assessment Dataset

Dil modellerinin farklı alanlarda Türkçe akıl yürütme becerilerini incelemek için hazırlanmış görevler.

Araştırma sorusu

Bir dil modelinin Türkçe akıl yürütmesini nasıl sınarsınız?

TARA’nın ilk sürümünde Türkçe üretilmiş 100 sentetik soru-cevap çifti var. On alanın her biri için on zorluk düzeyinde birer örnek hazırlanmış. Model her soruyla birlikte çözümde kullanacağı bir metin alıyor. Referans yanıt ve açık değerlendirme ölçütleri sayesinde, örneğin verilen şemaya uygun bir SQL sorgusunda ya da belirli kısıtlarla yazılan bir öyküde hangi koşulların arandığını görebiliyorsunuz.

Kaynakta geçen isimler
Davut Emre Taşar, Ceren Öcal Taşar
Yayın durumu
Kamuya açık araştırma veri kümesi · Sürüm 1
Yayın veya platform
Hugging Face Datasets
Tanımlayıcı
10.57967/hf/5193

Kaynaklar

Araştırma alanları · Dil

İlgili çalışmalar