Bir Kurgu Dışı Kitabın Kanıtları Nasıl Değerlendirilir?

Bir kurgu dışı kitabı üç geçişte değerlendirin. Önce notları, kaynakçayı, teşekkür bölümünü, yazarın geçmişini, baskı tarihini ve açıklanan araştırma desteğini haritalayın. Ardından bölümün sonucunu taşıyan önemli bir iddiayı cümleden nota, oradan asıl kaynağa kadar izleyin; kapsam ile kesinlik aynı mı, bakın. Son olarak kaynak seçimini, yazarın çıkarımını ve vardığı sonucu güvenilir dış sentezlerle karşılaştırın. Uzmanlık unvanı, saygın yayınevi, çok sayıda atıf ya da uzun kaynakça tek başına güvenilirlik belgesi değildir. Ulaşacağınız sonuç bütün kitap hakkında nihai bir hüküm değil, belirli bir iddia ve okuma amacı için gerekçeli, gerektiğinde değiştirilebilir bir değerlendirmedir.

Kitabın araştırma düzeni size ne söyler?

Araştırma düzeni, kitabın nasıl kurulduğunu ve savının ne kadar kolay yeniden izlenebildiğini gösterir; iddiaların doğru olduğunu tek başına kanıtlamaz. İlk taramada yazarın konuya ilişkin uzmanlığını ve kurumsal bağlantılarını, kitabın hedef kitlesini ve amacını, baskı tarihini, tanımlanabilir veri kullanımını ve editoryal sürece dair açıklamaları arayın. Sonra hangi bakış açılarının temsil edildiğine, hangilerinin dışarıda kaldığına bakın. Bunları puan toplanacak kutular gibi değil, daha yakından incelenecek yerleri gösteren tarama soruları olarak kullanın.

Not ile kaynakçayı aynı şey saymayın. Bir dipnot veya sonnot, belirli cümlenin dayandırıldığı sayfayı gösterebilir; kaynakça ise daha eksiksiz künyeler ya da daha geniş bir okuma dökümü sunabilir. Kitaplar numarasız sonnot, yazar-tarih sistemi, bölüm kaynakçası veya çevrim içi not kullandığından biçim değişebilir. Teşekkür bölümündeki araştırma yardımı, mali destek, görüşme ve özel erişim açıklamaları üretim koşullarını aydınlatır; adı geçen kişinin kitabın tamamını onayladığı anlamına gelmez. Dizin de yalnızca yinelenen kişi, olay ve kavramları bulmayı kolaylaştıran bir gezinme aracıdır.

Önemli bir iddia kaynak izini geçebiliyor mu?

Bir iddia, kendisine bağlanan kaynak aynı kapsamı ve kesinlik derecesini destekliyorsa kaynak izini geçer. Kontrol için süsleyici bir tarih yerine, yanlış çıkması bölümün veya ana sonucun gücünü azaltacak taşıyıcı bir cümle seçin. Cümleyi aynen not alın, işaretini ya da sonnotunu bulun ve mümkünse atıf yapılan sayfayı açın. Notun yalnızca aynı konudan söz etmesi yetmez; kitabın söylediği şey ile kaynağın gerçekten gösterdiği şey arasında anlam bakımından bir eşleşme bulunmalıdır.

1. Özne: Kaynak ve kitap aynı uygulama, olay veya etkiden mi söz ediyor?
2. Topluluk: İncelenen grup, kitabın genellediği toplulukla aynı mı?
3. Yer: Bulgular aynı coğrafi kapsam için mi geçerli?
4. Dönem: Kaynağın zaman aralığı kitabın iddiasıyla örtüşüyor mu?
5. Karşılaştırma: İki taraf da aynı başlangıç noktası veya karşı grubu mu kullanıyor?
6. Kesinlik: Kaynak bir olasılık bildirirken kitap bunu kesin sonuç gibi mi sunuyor?

Varsayımsal olarak kitap, bir uygulamanın geniş bir toplulukta hızla yayıldığını söylesin; not ise yalnızca kısa bir dönemde tek bir yerleşimde tutulan kayda götürsün. Kaynak yerel artışı destekleyebilir, fakat geniş topluluk ve hızlı yayılma sonucunu desteklemeyebilir. Sonucu “destekleniyor”, “kısmen destekleniyor”, “desteklenmiyor” veya “henüz doğrulanmadı” diye kaydedin. Tek bir sorun bütün kitabı otomatik olarak çürütmez. Kaynak kapalıysa yayınevinin erişilebilir sürümünü ya da aynı soruyu ele alan güvenilir bir sentezi arayın; iz hâlâ denetlenemiyorsa erişememeyi doğrulama veya çürütme saymadan iddiayı doğrulanmamış bırakın.

Atıf, onay mührü değil; incelenecek bir izdir.

Kaynak karışımı kitabın sorusuna uygun mu?

Kaynak karışımı, kitabın kanıtlamaya çalıştığı sonuç için gereken kayıtları, analizleri ve ciddi karşı görüşleri içeriyorsa soruya uygundur. “Birincil” ve “ikincil” sözcüklerini kalite derecesi gibi kullanmayın. Bir mektup belirli bir kişinin niyetini araştırırken birincil kayıt olabilir; aynı mektup toplumun tamamı hakkında eksiksiz ve tarafsız bir açıklama değildir. Bilimde özgün çalışma bir soru için birincil araştırma sayılabilirken onu daha geniş bulgularla karşılaştıran derleme farklı bir işlev üstlenir. Kaynağın statüsü her zaman soruyla birlikte anlam kazanır.

• Kaynağı kim, hangi amaçla ve hangi hedef kitle için üretti?
• Hangi koşullar, çıkarlar veya erişim sınırları kaydı biçimlendirmiş olabilir?
• Başka kanıtlar aynı noktayı doğruluyor, daraltıyor veya çürütüyor mu?
• Merkezî sonuç için gerekli dönemler, topluluklar, yöntemler veya karşı bulgular eksik mi?

İkincil kaynakları yalnızca özet diye küçümsemeyin; bunlar birincil malzemeyi eleştirebilir, karşılaştırabilir, bağlama yerleştirebilir ve çok sayıda bulguyu sentezleyebilir. Onların da ilgisini, yöntemini ve niteliğini sorgulayın. Her kitap için geçerli ideal bir birincil-ikincil kaynak oranı yoktur. Bir arşiv çalışması ile geniş bir bilimsel iddia doğal olarak farklı karışımlar gerektirir. Asıl soru, savın kapsamı için maddi öneme sahip kaynak türlerinin, dönemlerin, toplulukların ve karşıt bulguların ele alınıp alınmadığıdır; her eksiklik kasıt değil, fakat merkezî sonucu etkileyen boşluk açıklanmalıdır.

Kanıt nerede biter, yorum nerede başlar?

Kanıt, kaynağın kaydettiği veya raporladığı yerde; yorum ise yazarın o kayıttan sonuç çıkarıp onu daha büyük bir açıklamaya bağladığı yerde başlar. Bir pasajı üç katmana ayırın: Kaynak doğrudan ne gösteriyor, yazar bundan hangi çıkarımı yapıyor ve bu çıkarım kitabın ana savını nasıl ilerletiyor? Yorumun bulunması başlı başına kusur değildir; kurgu dışı argümanın gerekli ve sınanabilir köprüsüdür. Ölçüt, kanıtın sonucu metnin kullandığı güçte destekleyip desteklemediğidir.

• Yazarın çıkarımı hangi açık veya örtük varsayıma dayanıyor?
• Aynı kanıtla uyuşabilecek başka makul açıklamalar var mı?
• Merkezî sonuca zarar verebilecek karşı kanıt dürüstçe ele alınıyor mu?
• Boşluklar, sınırlılıklar ve belirsizlik anlatımın kesinlik düzeyine yansıyor mu?

Güçlü yorum, yalnızca kendi lehindeki parçaları sıralamakla kalmaz; maddi karşı kanıtı ve makul alternatifleri neden daha zayıf bulduğunu da gösterir. Elbette genel okura yazılmış bir kitap her olası itirazı tartışamaz. Bu nedenle eksikleri saymak yerine merkezî sonucu değiştirebilecek olanları arayın. Yazar varsayımlarını, veri boşluklarını ve gerçek görüş ayrılıklarını açıkça belirtiyorsa okur çıkarımın sınırlarını görebilir. Olası bir açıklamayı tek mümkün sonuç gibi sunan kesin dil ise, kaynaklar sağlam olsa bile yorum köprüsünü ayrıca denetlemeyi gerektirir.

Kitap güçlü sentezler ve güncel uzlaşıyla nasıl karşılaştırılır?

Kitabı güçlü sentezlerle karşılaştırmak için önce onun çerçevesinden çıkın ve aynı soruyu açık yöntemlerle inceleyen güncel, ilgili bir değerlendirme bulun. Geniş bir sonuç tek bir çarpıcı çalışmaya veya uzman sözlerine dayanıyorsa sistematik derleme yararlı bir karşılaştırma noktası olabilir. Böyle bir derleme belirli bir soru tanımlar; açık arama ve uygunluk ölçütleriyle birden çok çalışmayı seçip sentezler. Ancak “sistematik” etiketi de güvence değildir: sorusunu, tarihini, yöntemini, dahil edilen kanıtı, ilgisini ve sınırlılıklarını yine incelemek gerekir.

• Sentezin sorusu kitabın iddiasıyla gerçekten aynı mı?
• Arama kaynakları, dahil etme ölçütleri ve seçim tarihleri açıklanmış mı?
• Çıkarlar, varsayımlar, veri boşlukları ve belirsizlik görünür mü?
• Güçlü uzlaşı ile gerçek tartışma alanları birbirinden ayrılıyor mu?

Kurumsal yayının türünü de okuyun. National Academies bünyesinde uzlaşı çalışma raporu, tanımlı görev üzerinde çalışan komitenin kanıta dayalı uzlaşısını ve bağımsız incelemeyi yansıtır; çalıştay tutanakları ise katılımcı görüşlerini kaydeder ve kurumsal uzlaşı sayılmaz. Bu ayrım başka kuruluşlara otomatik olarak uygulanamaz, çünkü adlandırma ve süreçler değişir. Yanal kontrolde kaynağın arkasında kimin bulunduğunu, hangi kanıtı sunduğunu ve güvenilir dış kaynakların ne söylediğini araştırın. Tek uzman alıntısı da tek okurun denetimi de alan çapındaki tartışmayı sonuçlandırmaz; amaç mevcut uzlaşıyı ve açık anlaşmazlığı doğru ölçeklemektir.

On beş dakikada nasıl bir hükme varabilirsiniz?

On beş dakikada kitabın tamamı hakkında kesin hüküm veremezsiniz; belirli bir kullanım amacı için savunulabilir bir ön değerlendirme yapabilirsiniz. İlk 5 dakikada yazar, tarih, amaç, notlar, kaynakça, teşekkürler ve açıklanan süreci tarayın. Sonraki 5 dakikada taşıyıcı bir iddiayı cümleden kaynağa kadar izleyip altı kapsam unsurunu karşılaştırın. Son 5 dakikada kaynak karışımını, yorumun sınırlılıkları ele alışını ve bir güvenilir dış sentezi kontrol edin. Süre yetmezse eksik adımı kaydedin; belirsizliği olumlu veya olumsuz kanıt gibi kullanmayın.

• Güçlü: Seçilen iddia izlenebilir, kaynak aynı kapsamı destekler ve yorum önemli sınırları ele alır.
• Karma: Kaynak tabanı yararlıdır, fakat belirli bir iddia abartılmış veya belgeleme düzensizdir.
• Zayıf: Merkezî iddia izlenemez, kaynak onu maddi biçimde desteklemez ya da gerekli karşı kanıt sürekli görmezden gelinir.

Hükmünüzü mutlaka amaçla birlikte yazın: “Genel bir giriş için güçlü”, “bu bölümün geniş sonucu için karma” veya “bu iddiaya dayanmak için zayıf” gibi. Böylece tek bir kusuru bütün kitaba, tek bir başarılı kontrolü de bütün iddialara yaymazsınız. Daha iyi kaynak bulunduğunda değerlendirmeyi değiştirin. Yöntemin amacı kendinizi uzmanlık alanının son hakemi ilan etmek değil, kitaba vereceğiniz ağırlığı ayarlamaktır. Bir iddia yüksek önem taşıyan kişisel bir kararı etkiliyor, uzman yöntem gerektiriyor veya güncel güvenilir sentezle çatışıyorsa yalnızca kitaba ya da bu kısa denetime güvenmeyin; uygun uzmanlığa sahip kişiye veya alanın güncel rehberliğine başvurun.