Reddit'te astroturfing var mı? 51.129 yorumun gösterdikleri

Bıçak koleksiyoncuları için New Knife Day sitesini işleten Peter Vijeh, Reddit'in bıçak topluluklarında paralı paylaşımın izlerini arayan bir analiz yayımladı. Sonucu bilinçli olarak ölçülü: öneriler rastlantının tek başına açıklayabileceğinden daha fazla yoğunlaşmış, ama bundan sorumlu hesaplar kiralık yorumculardan çok sıradan meraklılara benziyor.

Ne ölçüldü

Veri kümesi altı alt dizini kapsıyor: r/knives, r/knifeclub, r/chefknives, r/japaneseknives, r/FixedBladeEdc ve r/KnifeSteels. Bir varlık tanıma modeli toplanan her yorumdaki markaları etiketliyor; "satın alma başlıkları" ise başlık ve metinler üzerinde bir düzenli ifadeyle tanımlanıyor: "should I buy" veya "best knife" gibi kalıplar.

Bir yenileme sonucu değiştirdi. Kazıyıcı yorumları çok erken kaydediyor: satın alma başlıkları önerileri sonraki bir iki gün içinde topluyor ve r/knives gönderilerinde ortalama yalnızca 1,5 kayıtlı yorum vardı. 48 saatten eski 3.607 gönderinin yeniden çekilmesi, veri kümesini 6.675 gönderide 21.673 yorumdan 51.129 yoruma çıkardı.

"Kuyruk", en az 10 yorumu olan 987 yazar arasından tek bir markaya ne kadar bağlı kaldıklarına göre seçilen en üst %5'lik kesim: 49 hesap. Vijeh ardından yazar adlarını tüm alıntılar arasında 1.000 kez rastgele yeniden dağıttı; böylece her hesap yazma hacmini korudu ama göründüğü başlıklarla bağı koptu.

Sayılar ne gösteriyor

Bu yeniden dağıtım, "kuyruğun" satın alma başlıklarındaki marka alıntılarının yaklaşık %7,9'unu yazması gerektiğini öngörüyor ve neredeyse her zaman %6,3 ile %10,1 arasında kalıyor. Kuyruk %11,3 yazdı ve 1.000 karıştırmadan yalnızca 2'si bu düzeye ulaştı: satın alma başlıklarındaki her dokuz öneriden biri bu 49 hesaptan geliyor, rastlantı ise on üçte bir diyor, yani 1.471 alıntıdan yaklaşık 50 fazlası.

Yoğunlaşma eşit dağılmıyor: iki alt dizin rastlantının üzerinde, r/chefknives %14,9'a karşı %7,7 ve r/knifeclub %12,4'e karşı %7,3, en büyük alt dizin r/knives ise rastlantının yarım puan yakınında kalıyor. Marka marka da aynı tablo var: B003 koduyla anılan bir şef bıçağı markası önerilerinin %31,2'sini kuyruktan alıyor, beklenen %8,0'a karşı yani rastlantının dört katı; B004 ise %8,2'ye karşı %26,1. Markalar kodlanmış, çünkü yoğunlaşma tek başına kimsenin ödeme yaptığının kanıtı değil.

Tam geçmişler ne gösterdi

Vijeh ayrıca sinyal veren üç markanın arkasındaki 23 kuyruk hesabının ve 23 karşılaştırma hesabının tam Reddit geçmişlerini çekti. Sekiz kuyruk geçmişi ile yedi karşılaştırma geçmişi gizli, askıya alınmış ya da silinmişti. Kalanlarda ortanca hesap yaşı her iki grupta da 4,5 yıldı. Kuyruğun yorumlarının yalnızca %3'ü altı bıçak alt dizinindeydi; karşılaştırma grubunda bu oran %10'du.

Tüm geçmişlerinde kuyruk bir değil yedi bıçak markası andı; Vijeh'e göre bu, tek amaç için "ısıtılmış" bir hesaba benzemiyor. Sekiz marka ve altı alt dizin test edildiği için bir ya da iki satır şans eseri tuhaf görünebilir; ne satın alma başlığı düzenli ifadesi ne de marka etiketleyici elle etiketlenmiş örneklerle karşılaştırıldı; üstelik çalışma Reddit'in tamamını değil altı alt dizini kapsıyor. Pratik önerisi şu: tanımadığınız bir hesap öneri verdiğinde, daha önce başka bir marka anıp anmadığına bakın.