Bilgisayar kullanılarak uygulanan testlerle geleneksel kağıt-kalem testlerini karşılaştıran bir çok araştırma bulunmaktadır. Bu araştırmalar çok çeşitli alanlara, farklı değişkenlere, farklı çalışma gruplarına yayılmıştır. Bu çalışmaların sonuçlarının meta-analiz yardımıyla toparlanıp derlenmesi hem diğer araştırmacılar hem de karar alıcı yetkililer açısından önemlidir. Bu araştırmada, kağıt-kalem formu ve bilgisayar ortamında uygulanan testlerde gösterilen öğrenci performanslarını karşılaştıran çalışmalar taranmıştır. Bu çalışmalar üzerinde kağıt-kalem formu ve bilgisayar ortamında uygulanan testlerin öğrenci performansı bakımından karşılaştırılması ile ilgili meta analiz çalışması yapılmıştır. Meta analize dahil edilen çalışmaların yanlı olup olmadığını belirlemek için duyarlılık analizi olarak Funnel grafiği ve Begg-Mazumdar sıra korelasyonları testinden yararlanılmıştır İncelenen çalışmalara ait etki büyüklükleri Comprehensive Meta Analysis yazılımı ile incelenmiştir. Hangi etki modelinin benimseneceğine karar vermek amacıyla heterojenlik testi sonuçları incelenmiş ve çalışmalara ait etki büyüklüklerinin normal dağılım gösterdiği görülmüştür. Bu bağlamda sabit etki modelinin seçilmesinde bir sakınca görülmemiştir. Ortak etki büyüklüğü hesaplamasında Hedge’in g katsayısının kullanılması uygun görülmüştür. Çalışmanın iki temel sınırlılığı söz konusudur. Zamansal sınırlılıklar nedeniyle, kağıt-kalem formunda ve bilgisayar ortamında uygulanan testlere ait karşılaştırmaların yapıldığı çalışmaların tümüne ulaşmak mümkün olmamıştır. İkinci sınırlılık ise, meta-analiz sonuçları konu alanlarına göre karşılaştırılmamış olmasıdır. Gelecek araştırmalarda konu alanlarına göre meta-analiz sonuçlarının karşılaştırılması faydalı olacaktır. Meta-analize dahil edilen 9 farklı çalışmaya ait toplam 35 bulguya göre, 29 karşılaştırmada bilgisayar ve kağıt-kalem formları arasında manidar bir fark bulunmazken, 6 çalışmada bilgisayar ve kağıt-kalem formları arasında manidar bir fark bulunmuştur. Tüm çalışmalardan elde edilen ortak etki büyüklüğünün -.09 olduğu görülmüştür. Bu durum, kağıt-kalem ve bilgisayar ortamında uygulanan testlerden elde edilen puanlar arasındaki farkın .09 standart sapmaya denk olduğunu belirtmektedir –ki bu oldukça küçük bir etki büyüklüğünü gösterir. Dolayısıyla meta-analiz sonuçlarına göre kağıt-kalem ve bilgisayar ortamında uygulanan testlerde gösterilen öğrenci performansları arasında manidar bir fark yoktur. Bu durumda, bilgisayarlı testlere geçilmesinde bir sakınca görülmemekle birlikte, bilgisayarlı test uygulamaları geliştirilirken yapılacak deneme uygulamaları ile öğrenci performansının formlara göre farklılık gösterip göstermediğinin araştırılması gerekmektedir