Editoryal standartlar

Soru sözleşmesi, öğrenciye ulaşan her içerik için yalnızca tek bir köken türüne izin verir: bize ait olan original. Resmî soru bankalarını, kullanımdan kaldırılmış sınav formlarını ya da başka bir yayıncının sorularını çoğaltmaz, uyarlamaz veya başka sözcüklerle yeniden yazmayız; başka kökenli bir sorunun yayımlanmasına izin verecek bir kod yolu da yoktur.

Her soru kaydı, soruyu taslak olarak yazan rolü belirtir, yazımına bir modelin yardım ettiğini kaydeder ve sorunun hak durumunu taşır. Bir modelin yazımına yardım ettiği her şey bankaya draft (taslak) olarak girer ve hiçbir soru aşağıdaki adımların tümünden geçmeden öğrencilere ulaşmaz.

Yayında olmak bir görüş değil, bir durumdur. Bir soru yalnızca bu beş durumdan birinde olabilir ve bunlardan yalnızca biri öğrencilere sunulur.

Derleme sürecinin bir parçası olarak depodaki her sorunun üzerinden bir doğrulayıcı geçer. Bu kontroller ucuz, sıkıcı ve kesindir: incelemenin, sorunun iyi biçimlendirilip biçimlendirilmediğine değil, doğru olup olmadığına harcanması için vardır.

• Aynı anlama gelen cevap seçenekleri reddedilir. Seçenek metni önce sayısal olarak normalleştirilir; böylece “0.50”, “.5” ve “1/2” iki kez sunulmuş tek bir cevap olarak çakışır. Noktalama yalnızca sayısal bir okuma denenirken yok sayılır, çünkü SAT ve ACT’de çoğu zaman sorunun kendisi noktalamadır.
• Cevap anahtarı var olan seçenekleri göstermeli ve türü, sorunun cevap türüyle eşleşmelidir. Tüm seçenekleri içeren bir “uygun olanların hepsini seçin” anahtarı, gerçek bir soru olmadığı gerekçesiyle reddedilir.
• Sayısal cevaplar tutarlı olmalıdır: en küçük değeri en büyük değerini aşan bir aralık ya da negatif bir tolerans olamaz.
• Her yanlış seçeneğin neden yanlış olduğuna dair yazılı bir gerekçesi olmalıdır. Eksik ya da özensiz bir çeldirici gerekçesi yayımlanmayı engeller.
• Açıklamalar gerçekten açıklamalıdır: 40 karakterden kısa bir açıklama hiç kabul edilmez.
• Bir seçeneği cevap olarak adlandıran bir açıklama (“cevap C’dir”, “dolayısıyla A seçeneği doğru olmalıdır” gibi) anahtardaki seçeneği adlandırmalıdır. Kontrol yalnızca açık ifadeleri okur; bu nedenle her harfin doğru olduğunun bir kanıtı değil, bir güvenlik ağıdır.
• Bir parçaya, grafiğe ya da tabloya atıfta bulunan bir soru, gerçekten var olan bir parçaya, grafiğe ya da tabloya atıfta bulunmalıdır.
• Yayımlanmış bir soru bir denetçi belirtmelidir ve denetçi, sorunun yazarı olmamalıdır.
• Yayımlanmış bir soru, bir inceleme tarihi ve çözücünün anahtara katıldığı ve cevabın tekliğini teyit ettiği eksiksiz bir bağımsız çözüm kaydı taşımalıdır.
• Ampirik olarak kalibre edildiği belirtilen zorluk derecesi uyarıyla işaretlenir, çünkü kalibrasyon yapmamızı sağlayacak doğrulanmış yanıt verilerine sahip değiliz.

Bunlardan herhangi birini geçemeyen bir soru yayımlanmaz. Derleme de onunla birlikte başarısız olur.

Tüm süreç bu kontrol üzerine kurulu olduğundan, nasıl işlediğini tam olarak anlatmaya değer. Denetçi, soruyu taslak olarak yazan modelden ayrı bir yapay zekâ modelidir. Önerilen cevabı görebilen bir denetçi soruyu çözmüyor, ona katılıyordur. Bu yüzden denetçi cevabı hiçbir zaman görmez.

Soru grubu temizlenir, ardından temizlik kontrol edilir

İncelemeyi bekleyen sorular; cevap anahtarı, açıklama ve çeldirici gerekçeleri çıkarılarak ayrı bir dosyaya aktarılır. Dışa aktarım ardından yazdığı dosyayı yeniden okur ve bu üç alandan herhangi biri dosyanın herhangi bir yerinde görünürse açıkça hata vererek durur. Bir sızıntı, incelemenin kalitesini sessizce düşürmek yerine grubun tamamını durdurur.

Denetçi soruyu sıfırdan çözer

Denetçi soru kökünü, yönergeleri, parçayı ya da grafiği ve cevap seçeneklerini alır; başka hiçbir şeyi değil. Bunlarla birlikte, o türden bir cevabın tam olarak nasıl ifade edileceğine dair bir açıklama da verilir. Denetçi ulaştığı cevabı, çalışma notlarını ve yalnızca tek bir seçeneğin savunulabilir olduğunu teyit edip etmediğini kaydeder.

Karşılaştırma mekaniktir

Denetçiye hiçbir zaman katılıp katılmadığı sorulmaz. Cevabı bir yanıta dönüştürülür ve bir öğrencinin oturumunu puanlayan puanlama motorunun aynısından geçirilir; yazarın anahtarıyla eşleşip eşleşmediğine motor karar verir. Bu, editoryal incelemedeki en yaygın hata biçimini ortadan kaldırır: amaçlanan cevabı yarım yamalak tanıyıp kendini ona ikna eden bir denetçi.

Uyuşmazlık düzeltmeye değil, karantinaya yol açar

Çözülen cevap anahtarla eşleşirse ve teklik teyit edildiyse, soru denetçinin rolü, tarih ve çözüm kaydının tamamı eklenerek yayımlanır. Diğer tüm durumlarda (bir uyuşmazlık ya da teyit edilmemiş teklik) soru, denetçinin cevabı ve notları gerekçeye yazılarak quarantined (karantinada) durumuna geçer ve canlı bankadan çıkar. Bu süreçte hiçbir adım, yazarın “ne demek istediğini” tahmin etmez. Tartışmalı bir soru, yeniden yazılıp yeni bir körlemesine çözümden geçene kadar dışarıda kalır.

Bir modelin yaptığı kontrol, bir insanın yaptığı kontrolle aynı şey değildir; bu yüzden liste adım adım aşağıdadır. Soru kayıtlarının gerçekte neler içerdiğini anlatır.

Her soru kolay, orta ya da zor etiketi taşır ve bu etiketlerin her biri, sorunun ne kadar zor olması gerektiğine dair bizim editoryal değerlendirmemizdir. Sınava girenlerin verilerine göre kalibre edilmemiştir, çünkü kalibrasyon yapmamızı sağlayacak doğrulanmış yanıt verilerine sahip değiliz; aksini iddia eden bir etiket, uydurduğumuz bir istatistik olurdu. Bir sorunun zorluk dayanağı “ampirik” olarak belirtilmişse doğrulayıcı bunu işaretler.

Aynı nedenle: bir inceleme size bir sorunun doğru ve açık olduğunu söyler. Bu sorulardan oluşan bir setin sizi bir sınavın bildirilen ölçeğinde nereye yerleştireceği hakkında hiçbir şey söylemez. Neden ölçeklenmiş puan, yüzdelik dilim ya da kabul tahmini yayımlamadığımızı puanlamamız nasıl işler sayfasında açıklıyoruz.

Format, süre, gezinme, hesap makinesi kuralları ve puanlama ezberden yazılmaz. Her sınavın bir araştırma kaydı vardır: doğrulanmış iddiaları, bunların dayandığı kaynakları (yayıncısı ve erişim durumuyla birlikte), bir doğrulama tarihini ve en önemlisi, sınavı düzenleyen kurumun yayımlamadığı şeylerin açık bir listesini içerir.

Depodaki araştırma belgeleri bu kayıtlardan saf bir dönüşümle, bilinçli olarak üretilir; böylece belgeler kayıtta zaten bulunmayan hiçbir şeyi öne süremez. Bir bilgi kayıtta değişir ve belge onu izler; hiçbir zaman tersi olmaz.

Doğrulanamayanlar listesinin gerçek bir etkisi vardır. Bir kural doğrulanamadığında, ona bağlı özellik tahminle çalıştırılmak yerine devre dışı bırakılır ve sınav sayfası hangi özelliğin neden devre dışı olduğunu belirtir. Bir şeyi yaklaşık olarak belirlediğimiz durumlarda bu yaklaşım, geçerli olduğu sayfada bize ait olarak etiketlenir: örneğin Digital SAT simülasyonumuzdaki ikinci aşama yönlendirme eşiği, College Board’un değil, bizim yayımladığımız kendi kuralımızdır.

Kayıt dönemleri ve sınav tarihleri gibi tarihe bağlı bilgiler, kural bilgilerinden daha kısa aralıklarla gözden geçirilir; kural bilgileri ise bir simülasyonun işleyişini değiştiren her sürümden önce yeniden doğrulanır. Mevcut tüm sınav kayıtları 18 Eylül 2026 tarihinde doğrulandı.

Kontroller pek çok şeyi yakalar ama hiçbir zaman her şeyi değil. Bir soru yanlış, belirsiz ya da kötü ifade edilmiş görünüyorsa bize bildirin. Bildiriminiz, soru ve gördüğünüz sürümü eklenmiş olarak editör alanındaki inceleme sırasına girer.

Düzeltmeler, bir öğrencinin daha önce gördüğü şey düzenlenerek değil, her zaman yeni sürümler olarak yapılır. Eylül 2026’da yapılan bir denetim, cevap seçeneklerinin yeniden sıralanması nedeniyle yayımlanmış 104 açıklamanın seçeneklere hâlâ eski harfleriyle atıfta bulunduğunu ve bunların 91’inin cevap olarak yanlış bir seçeneği gösterdiğini ortaya koydu. Her biri yeni bir sürüm olarak düzeltildi; ayrı bir yapay zekâ denetçisi seçenek atıflarını yeniden kontrol edene ve yeni bir körlemesine çözüm başarılı olana kadar yeni oturumlardan çekildi, ardından geri getirildi. Önceki oturumlar kendilerine gösterilen sürümü korur. Aynı ay yapılan ikinci bir kontrolde ayrı bir yapay zekâ denetçisi, yayımlanmış geri kalan 180 açıklama ve çeldirici notunun seçenekler hakkında öne sürdüğü her iddiayı test etti. Tüm cevap anahtarlarını teyit etti ve 37 soruda yanlış ifadeler buldu; örneğin, ilgili seçeneğe götürmeyen bir hatayı anlatan bir not. Bunlar, hafta etiketleri metniyle uyuşmayan bir grafikle birlikte aynı şekilde düzeltilip incelendi.

• Resmî bir soruyu çoğaltmak, uyarlamak ya da başka sözcüklerle yeniden yazmak. Buradaki her soru bize aittir ve içerik sözleşmesi başka hiçbir şeye izin vermez.
• Ölçeklenmiş puan, yüzdelik dilim, puan aralığı ya da kabul olasılığı bildirmek. Kapsadığımız sınavları düzenleyen kurumların hiçbiri, böyle bir sayıyı dürüst kılacak eşitleme (equating) yöntemini yayımlamıyor.
• Rekabete dayalı bir sıralamayla karar verilen bir kabul süreci için “hedef puan” sunmak.
• Bize ait olan bir zorluk etiketini, yönlendirme kuralını ya da süre payını sınavın kendisininmiş gibi sunmak.
• Güncel görünmesi için bir yayın ya da güncelleme tarihini yenilemek. Bu sitedeki tarihler, çalışmanın yapıldığı tarihlerdir.
• Herhangi bir sınav kurumuyla bağlantımız olduğunu ya da onun tarafından onaylandığımızı iddia etmek. İkisi de söz konusu değil; sitenin alt bilgisindeki not, bu konudaki eksiksiz açıklamamızdır.