2025 · Kamuya açık araştırma veri kümesi · Sürüm 1
TARA: Turkish Advanced Reasoning Assessment Dataset
Dil modellerinin farklı alanlarda Türkçe akıl yürütme becerilerini incelemek için hazırlanmış görevler.
Araştırma sorusu
Bir dil modelinin Türkçe akıl yürütmesini nasıl sınarsınız?
TARA’nın ilk sürümünde Türkçe üretilmiş 100 sentetik soru-cevap çifti var. On alanın her biri için on zorluk düzeyinde birer örnek hazırlanmış. Model her soruyla birlikte çözümde kullanacağı bir metin alıyor. Referans yanıt ve açık değerlendirme ölçütleri sayesinde, örneğin verilen şemaya uygun bir SQL sorgusunda ya da belirli kısıtlarla yazılan bir öyküde hangi koşulların arandığını görebiliyorsunuz.
- Kaynakta geçen isimler
- Davut Emre Taşar, Ceren Öcal Taşar
- Yayın durumu
- Kamuya açık araştırma veri kümesi · Sürüm 1
- Yayın veya platform
- Hugging Face Datasets
- Tanımlayıcı
- 10.57967/hf/5193
Kaynaklar
Araştırma alanları · Dil