Bir anket gerçekte neyi ölçer
Bir anket sonucu tek bir şeyi gösterir: kime soru soruldu ve o sorulan kişilerden kaçı cevap verme zahmetine katlandı. Kalite, genel popülerlik ya da bir pazarın gerçek tercihi, bu sayının doğrudan gösterdiği şeyler değildir; bunlar sayının üstüne sonradan eklenen yorumlardır. Küçük ama ilgili bir topluluk, büyük ama ilgisiz bir kitleden daha güçlü bir sayı üretebilir, ve bu, sayının kendisini yanlış değil, yalnızca eksik okunmuş yapar.
Dosyalar
Bir oy sayısının gerçekte ölçtüğü şey
Bir anket sonucu iki sorunun cevabını taşır: soru kime soruldu ve o kişilerden kaçı gerçekten cevap verdi. Sayı büyüdükçe insanın aklına gelen ilk yorum genelde daha çok kişi bunu beğendi olur, ama sayı bunu söylemez; yalnızca o kadar kişinin sayfaya gelip bir tık yaptığını söyler.
Kalite bu ölçümün dışında kalır, çünkü bir seçeneğin sağlam ya da zayıf olması, ona kaç kişinin oy verdiğiyle doğrudan bağlantılı değildir. Genel popülerlik de aynı şekilde dışarıda kalır, çünkü anketi görmeyen ya da görüp de cevap vermeyen büyük bir kitlenin görüşü hiçbir zaman sayıya yansımaz. Bir pazarın gerçek tercihi ise anketten çok daha geniş bir veri seti gerektirir; bir anket sonucu, o pazarın yalnızca anketle karşılaşan ve cevap veren dar bir diliminin görüşünü taşır.
Bu ayrımı gözden kaçırmak kolaydır, çünkü büyük bir sayı kendiliğinden bir otorite izlenimi verir. Bir başlıkta yüksek bir katılım rakamı görüldüğünde, okuyan kişi genelde bu rakamın arkasında geniş ve temsil edici bir kitle olduğunu varsayar. Oysa aynı rakam, çok daha dar ama kendi içinde hareketli bir grubun ürünü de olabilir; sayının kendisi bu ikisi arasındaki farkı hiçbir zaman göstermez, yalnızca toplam bir rakam sunar ve yorumu okuyana bırakır.
Bir anket, katılımcılarını rastgele seçmez; kendiliğinden gelen kişileri kaydeder. Bu, istatistiksel araştırmalarda kullanılan rastgele örneklemden temelden farklı bir yöntemdir, çünkü rastgele örneklem her kişiye eşit bir katılma şansı tanırken, bir anket yalnızca sayfayı görüp katılmayı seçen kişileri kaydeder. Bu fark, iki yöntemin ürettiği sayının neden aynı ağırlıkta okunamayacağını açıklar.
Küçük ve ilgili bir kitle neden büyük ve pasif bir kitleyi geçer
Bir anket sonucunu belirleyen şey, kaç kişinin sayfayı gördüğü değil, gördükten sonra kaçının gerçekten oy kullandığıdır. Çok geniş bir kitleye ulaşan ama neredeyse hiçbirinin ilgisini çekmeyen bir paylaşım, dar bir kitleye ulaşan ama o dar kitlenin tamamını harekete geçiren bir paylaşımdan daha düşük bir sayı üretebilir.
Bu durum aslında beklenmedik bir şey değildir: bir anket, görülme sayısını değil, harekete geçme oranını ödüllendirir. Küçük bir topluluk, ortak bir bağ ya da güçlü bir ilgiyle bağlıysa, üyelerinin büyük kısmını oy kullanmaya ikna edebilir; büyük ama dağınık bir kitlede ise aynı oran neredeyse hiç yakalanmaz, çünkü kimse kimseyi harekete geçirmez. Sonuçta ortaya çıkan sayı, kitlenin büyüklüğünü değil, o kitlenin ne kadar harekete geçtiğini yansıtır.
Bu fark, bir anketi büyütmek isteyen bir organizatör için de pratik bir sonuç taşır: geniş ama ilgisiz bir kitleye ulaşmaya çalışmak yerine, zaten ilgili olan dar bir kitleyi harekete geçirmek genelde daha yüksek bir sayı üretir. Bu, geniş kitlenin değersiz olduğu anlamına gelmez; yalnızca bir anket sonucunun, erişimin büyüklüğünden çok, o erişimin ne kadarının harekete dönüştüğüne bağlı olduğunu gösterir.
Herkese açık bir sıralama, ölçtüğü davranışı nasıl değiştirir
Bir sıralama herkese açık biçimde canlı yayımlandığında, katılımcılar artık yalnızca görüşlerini bildirmiyor, aynı zamanda o sıralamayı izleyip tepki veriyor demektir. Bir seçenek geride kaldığını gördüğünde destekçileri harekete geçebilir, öndeki seçeneğin destekçileri ise rahatlayıp oy kullanmayı erteleyebilir. Bu davranış, sıralama gizli olsaydı hiç ortaya çıkmazdı.
Bu yüzden herkese açık bir sıralama, ölçtüğü şeyi kendi varlığıyla değiştiren bir araçtır: sonuç artık yalnızca bir tercihi değil, o tercihin canlı sıralamaya karşı verdiği tepkiyi de içerir. Bir organizatör sıralamayı gizli tutmayı seçtiğinde bu etkiyi ortadan kaldırır, ama bu sefer de katılımcı kendi oyunun nerede durduğunu göremez ve bu, katılım isteğini başka bir yönde etkileyebilir. İki seçenek de kendi içinde tutarlıdır, ikisi de farklı bir sonuç üretir.
Bu etkinin bir başka sonucu, sıralamanın erken döneminde oluşan küçük bir farkın zamanla büyümesidir. Bir seçenek baştan az da olsa öne geçtiğinde, bu görünürlük kendi destekçilerini daha da harekete geçirebilir, geride kalan tarafın destekçileri ise bazen isteksizleşip katılımı bırakabilir. Böyle bir durumda son sayı, yalnızca tercihleri değil, sıralamanın kendi seyri boyunca yarattığı psikolojik etkiyi de taşır ve bu etki, oylama kapandıktan sonra ayırt edilemez hale gelir.
Bazı organizatörler bu etkiyi azaltmak için sıralamayı yalnızca oylama kapandıktan sonra yayımlamayı tercih eder; bu, katılımcının canlı sıralamaya tepki vermesini engeller ama bu sefer de katılımı teşvik eden görünürlük ortadan kalkar. İki yaklaşım arasındaki tercih, organizatörün katılımı mı yoksa sonucun saflığını mı önceliklendirdiğine bağlıdır.
Ortalama puan ile toplam oy sayısı farklı bir soruya cevap verir
Toplam oy sayısı, kaç kişinin bir seçeneği işaretlediğini gösterir; katılım hacmini ölçer. Ortalama puan ise her katılımcının verdiği puanın ortalamasını alır ve katılımcı başına düşen memnuniyeti gösterir. İkisi aynı veriden çıkar ama farklı bir soruya cevap verir, bu yüzden aynı seçenek bir ölçüte göre önde, diğerine göre geride görünebilir.
Az sayıda ama yüksek puan veren bir grup, ortalama puanlamada öne çıkarken toplam oy sayısında geride kalabilir; çok sayıda ama orta düzeyde puan veren bir grup ise tam tersi bir tablo üretebilir. Bir sonucu okuyan kişi, hangi ölçütün kullanıldığını bilmeden kazanan kelimesini duyduğunda, aslında iki farklı sorudan hangisinin cevaplandığını da bilmiyor demektir.
Bu iki ölçütün hangisinin kullanılacağı, önceden açıkça belirtilmediği sürece bir belirsizlik kaynağı olur. Bir organizatör sonucu açıklarken hangi ölçütü esas aldığını söylemezse, aynı ham veriden iki farklı kazanan çıkarılabilir ve bu durum, sonucu okuyan taraflar arasında kolayca bir anlaşmazlığa dönüşebilir. Ölçütün hangisi olduğu, oylama başlamadan önce yazılı hale getirilmelidir, sonradan seçilen bir ölçüt her zaman şüpheyle karşılanır.
Bir üçüncü ölçüt daha vardır ve genelde ikisiyle karıştırılır: katılım oranı, yani sayfayı görenlerin kaçının gerçekten oy kullandığı. Bu ölçüt ne toplam oy sayısını ne de ortalama puanı doğrudan yansıtır; yalnızca erişimin ne kadarının harekete dönüştüğünü gösterir ve bir organizatör için diğer ikisinden farklı bir planlama sinyali taşır.
Halk ödülünü kazanmak ile en iyi çalışma olmak aynı iddia değildir
Bir başlıkta halk ödülünü kazandı yazması ile en iyi çalışma seçildi yazması aynı şeyi söylemez, ama haberler ve paylaşımlar bu ikisini sıkça birbirinin yerine kullanır. Halk ödülü, yalnızca en çok oy toplayan seçeneği gösterir; bu seçeneğin bir jüri tarafından da en iyi bulunduğu anlamına gelmez, çünkü ikisi genelde ayrı süreçlerdir.
Bir seçenek, geniş bir kitleye ulaşabildiği ya da paylaşılmaya uygun bir içerik taşıdığı için çok oy toplayabilir; bu, o seçeneğin teknik ya da sanatsal açıdan en güçlü olduğu anlamına gelmez. Aynı şekilde, jüri gözünde en güçlü bulunan bir çalışma, geniş bir kitleye ulaşamadığı için halk oyunda geride kalabilir. Bu iki sonucu tek bir cümlede birleştirmek, okuyanın gözünde ikisinin aynı iddiayı taşıdığı izlenimini yaratır, oysa taşımazlar.
Bu karışıklığın pratik bir sonucu da vardır: bir kazanan ilan edilirken hangi unvanın kastedildiği net yazılmazsa, iki farklı başarı tek bir cümlede birleştirilmiş olur ve okuyan taraf hangi sürecin sonucunu gördüğünü anlayamaz. Bir haberde yalnızca kazandı yazması, kazanılan şeyin halk ödülü mü yoksa jüri kararı mı olduğunu belirtmediği sürece, iddianın kendisi eksik kalır ve iki başarı birbirinin yerine geçmiş gibi okunur.
Bir oy sayısının cevap veremediği sorular
Bir oy sayısına bakıldığında sorulması gereken, o sayının hangi soruyu cevapladığı, hangi soruyu cevaplamadığıdır.
Bu dört soru, bir oy sayısının sınırlarını hatırlatmak için sorulur, sayının kendisini geçersiz kılmak için değil; bir anket hâlâ gerçek bir katılımı ve gerçek bir tercihi yansıtır, yalnızca bu dört sorunun cevabını kendiliğinden vermez.
- Bu seçenek gerçekten daha mı kaliteli? Oy sayısı bunu göstermez, yalnızca kaç kişinin oy kullandığını gösterir.
- Bu seçenek genel olarak daha mı popüler? Oy sayısı bunu göstermez, çünkü anketi hiç görmeyen büyük bir kitle sayıya hiç yansımaz.
- Pazarın gerçek tercihi bu mu? Oy sayısı bunu göstermez, çünkü bir anket pazarın yalnızca dar ve kendiliğinden katılan bir dilimini kapsar.
- Bu seçenek gelecekte de mi tercih edilecek? Oy sayısı bunu göstermez, çünkü bir anket yalnızca o anki katılımı yakalar, gelecekteki bir eğilimi öngörmez.
Aynı rakamın farklı bağlamda taşıdığı farklı ağırlık
Bir anket sonucunun ne kadar önemli sayılması gerektiği, yalnızca sayının büyüklüğüne değil, o sayının nerede ve ne amaçla kullanılacağına da bağlıdır. Bir organizasyon içi tercih sorması amacıyla açılan küçük bir anket, düşük bir katılım sayısıyla bile amacına ulaşmış sayılabilir, çünkü amaç zaten dar bir grubun görüşünü öğrenmekti. Aynı düşük sayı, geniş bir kamuoyunu temsil ettiği iddiasıyla paylaşılırsa, artık amacının çok ötesinde bir iddia taşımış olur.
Bu yüzden bir anket sonucunu değerlendirirken sorulması gereken ilk soru, sayının kendisinden önce, o sayının hangi amaçla toplandığıdır. Dar bir hedef için toplanan bir sayı, geniş bir iddiayı desteklemek için kullanıldığında, sayının kendisi değişmese de taşıdığı iddia bambaşka bir yere taşınmış olur. Bir okuyucu için en güvenli yaklaşım, bir sayıyı gördüğü bağlamdan koparıp başka bir bağlama taşımadan önce, o sayının aslında hangi soruya cevap vermek üzere toplandığını sormaktır.
Bu sorgulama alışkanlığı, özellikle bir sayının paylaşımdan paylaşıma taşındığı durumlarda değer kazanır. Bir sayı ilk toplandığı sayfadan koparılıp başka bir yazıda ya da başka bir başlıkta yeniden kullanıldığında, orijinal bağlamı genelde birlikte taşınmaz; okuyan kişi yalnızca çıplak rakamla karşılaşır ve o rakamın hangi dar ya da geniş bir katılımdan geldiğini kendi başına tahmin etmek zorunda kalır.
Sayının hareket ettirmeye değip değmediğine nasıl karar verilir
Bu dört soru aynı anda sorulduğunda, bir oy sayısının aslında ne kadar dar bir soruya cevap verdiği daha açık görülür; sayı büyük olsa bile, cevapladığı soru hep aynı kalır.
Bir anket sonucunu gören kişi için asıl pratik soru, bu sayının bir kararı değiştirmeye değip değmediğidir. Sayı büyükse ve arkasındaki kitle geniş ve çeşitliyse, bir eğilime işaret ediyor olabilir. Sayı küçükse ya da tek bir dar topluluktan geliyorsa, aynı sayı çok daha temkinli okunmalıdır.
Karar vermeden önce, sayının hangi soruyu cevapladığı netleştirilmelidir: katılım hacmi mi, ortalama memnuniyet mi, yoksa yalnızca bir halk ödülü kategorisi mi. Bu netlik sağlanmadan bir sayıyı büyük bir kararın gerekçesi yapmak, aslında farklı bir soruya verilmiş bir cevabı, sorulmamış bir soruya uygulamak anlamına gelir. Bir sayı hareket ettirmeye değer olabilir, ama yalnızca hangi soruyu cevapladığı bilindiğinde.
Bu değerlendirme, bir sayının küçümsenmesi gerektiği anlamına gelmez; yalnızca hangi ölçekte okunması gerektiğini belirler. Dar bir topluluktan gelen yüksek bir sayı, o topluluk için gerçek bir sinyal taşıyabilir, ama bu sinyali daha geniş bir kitleye ya da farklı bir soruya genellemek, sayının kendi sınırlarını aşan bir yorum katmak anlamına gelir.
Birçok platform ve yarışma düzenleyicisi, oy satın almayı, bot kullanmayı ve otomatik oylamayı açıkça yasaklar ve ihlal halinde katılımcıyı diskalifiye edebileceğini yazar. Birçok kural ayrıca sahte veya spam oylarla girişim kazanmaya çalışmayı şüpheli faaliyet sayar ve girişin silinmesini öngörür. Bu riski ortadan kaldıran hiçbir satış yoktur ve biz öyle bir vaat vermiyoruz. Bu yüzden sipariş öncesi yarışmanın yayınlanmış kuralını okumanızı, kural açıkça oy alımını yasaklıyorsa satın almamanızı öneririz.
Düzenleyiciler şüpheli katılımı desenlerle ayırt eder: tek bir kaynaktan gelen çok sayıda oy, farklı ülkelerden aniden gelen oy ve saniyeler arayla tekrarlanan düzenli oy zamanlaması bunların başında gelir. Anketler normalde kişinin kendi zamanında, anketin açık olduğu süre boyunca ve anketin kitlesine yayılarak kullanılır. Teslim planı bu doğal ritme uyar: oylar anketin süresine yayılır ve tek bir desende yığılmaz. Bu, bir denetimi atlatma yöntemi değil, normal katılımın nasıl göründüğüne dair bir açıklamadır.
Bilgi, beceri veya yeteneğe dayalı yarışmalar Türkiye'de ilgili düzenlemelere uygun olduğu sürece genel olarak izinlidir; buna karşılık şansa dayalı ve katılım karşılığı para alınan çekilişler izinden bağımsız olarak yasa dışıdır ve izinsiz çekiliş düzenlemek cezai yaptırıma tabidir. Ayrıca yapay puan artırma amacıyla kurgulanan oylama manipülasyonu haksız rekabet fiili kabul edilir. Bu yüzden çekiliş ve piyango niteliğindeki oylamalar ile şans unsuruna dayalı hiçbir işi kabul etmiyoruz; yalnızca beceri ya da halk oylaması temelli anket ve yarışma katılımıyla çalışırız.
Sipariş, anket kapanmadan planlandığı biçimde teslim edilmezse ödemenin karşılanmayan kısmı iade edilir; teslim hiç başlamadıysa tam iade yapılır. Ayrıca tüketici mevzuatı gereği cayma hakkınız yasal süre içinde geçerlidir. Organizatörün girişi silmesi, diskalifiye etmesi ya da oyları bekletmesi garanti kapsamında değildir, çünkü bunlar satın alan tarafın engelleyemeyeceği kararlardır; şüpheli görülen oylar birçok yarışmada incelemeye kadar sıralamadan çıkarılır.
Sorular
Hayır. Oy sayısı yalnızca kaç kişinin oy kullandığını gösterir, o seçeneğin teknik ya da içerik kalitesini ölçmez. Yüksek sayı, geniş bir kitleye ulaşmanın ya da paylaşılmaya uygun olmanın sonucu da olabilir, kalitenin kanıtı olmak zorunda değildir. Kalite, oy sayısından bağımsız ayrı bir değerlendirme süreci gerektirir.
Çünkü sonucu belirleyen kitlenin büyüklüğü değil, o kitlenin ne kadarının gerçekten oy kullandığıdır. Ortak bir bağla birleşmiş küçük bir topluluk üyelerinin büyük kısmını harekete geçirebilirken, büyük ve dağınık bir kitlede aynı oran nadiren yakalanır. Bu yüzden erişim rakamı tek başına, bir anketin ne kadar güçlü bir sonuç üreteceğini önceden göstermez.
Çünkü katılımcılar sıralamayı gördükçe ona tepki verir; geride kalan seçeneğin destekçileri harekete geçebilir, öndeki seçeneğin destekçileri ise rahatlayabilir. Bu tepki, sıralama gizli tutulsaydı hiç ortaya çıkmazdı, bu yüzden herkese açık bir sıralama ölçtüğü şeyi kendi varlığıyla değiştirir. Bazı organizatörler bu yüzden sıralamayı yalnızca oylama kapandıktan sonra paylaşmayı tercih eder.
İkisi de kendi içinde tutarlıdır, biri diğerinden daha güvenilir sayılmaz; farklı bir soruyu ölçerler. Toplam oy katılım hacmini gösterirken ortalama puan katılımcı başına memnuniyeti gösterir, hangisinin önemli olduğu okuyanın sorduğu soruya bağlıdır. Üçüncü bir ölçüt olan katılım oranı ise ikisinden de farklı bir soruyu, erişimin ne kadarının harekete dönüştüğünü cevaplar.
Hayır, ikisi ayrı iddialardır. Halk ödülü yalnızca en çok oy toplayan seçeneği gösterirken, en iyisi seçildi ifadesi genelde bir jüri değerlendirmesine işaret eder; bir seçenek birini kazanıp diğerini kazanmayabilir, çünkü ikisi farklı bir süreçten geçer. Bir haberde bu iki unvan ayrı ayrı belirtilmediği sürece okuyan taraf hangi sürecin sonucunu gördüğünü tam olarak anlayamaz.
Evet, sayının kendisi değişmez ama taşıdığı iddia değişebilir. Dar bir hedef için toplanan küçük bir sayı, geniş bir kamuoyunu temsil ettiği iddiasıyla paylaşıldığında, aslında topladığı veriden çok daha büyük bir iddiayı üstlenmiş olur; bu fark, sayının güvenilirliğinden çok kullanıldığı bağlamdan kaynaklanır. Bu yüzden bir sayıyı yeniden paylaşmadan önce, ilk toplandığı bağlamı da birlikte aktarmak okuyana daha dürüst bir tablo sunar.
Son kontrol: