אסטרוטרפינג ב-Reddit: מה מראים 51,129 תגובות בפורומי סכינים

פיטר ויג'ה, שמפעיל את אתר אספני הסכינים New Knife Day, פרסם ניתוח ששואל אם קהילות הסכינים ב-Reddit נושאות סימנים של פרסום בתשלום. המסקנה שלו מדודה בכוונה: ההמלצות מרוכזות יותר ממה שהמקריות לבדה מסבירה, אך החשבונות האחראים נראים כמו חובבים רגילים ולא כמו כותבים שכורים.

מה נמדד

הקורפוס מכסה שישה סאב-רדיטים: r/knives, r/knifeclub, r/chefknives, r/japaneseknives, r/FixedBladeEdc ו-r/KnifeSteels. מודל לזיהוי ישויות מסמן מותגים בכל תגובה שנאספה, ו"שרשורי קנייה" מוגדרים באמצעות ביטוי רגולרי על כותרות וגופי טקסט, לפי ביטויים כמו "should I buy" או "best knife".

רענון אחד שינה את התוצאה. הסורק שומר תגובות מוקדם מדי: שרשורי קנייה אוספים עצות במהלך היום-יומיים הבאים, ולכן לפוסטים ב-r/knives היו רק 1.5 תגובות שמורות בממוצע. שליפה מחדש של 3,607 פוסטים בני יותר מ-48 שעות הגדילה את הקורפוס מ-21,673 תגובות ל-51,129 תגובות ב-6,675 פוסטים.

ה"זנב" הוא 5% העליונים מבין 987 הכותבים עם 10 תגובות לפחות, לפי מידת ההיצמדות שלהם למותג אחד: 49 חשבונות. לאחר מכן ויג'ה הקצה מחדש שמות כותבים באופן אקראי בין כל האזכורים 1,000 פעמים, כך שכל חשבון שמר על היקף הכתיבה שלו אך איבד כל קשר לשרשורים שבהם הופיע.

מה מראים המספרים

ההקצאה האקראית חוזה שה"זנב" אמור לכתוב כ-7.9% מאזכורי המותגים בשרשורי קנייה, וכמעט תמיד בין 6.3% ל-10.1%. בפועל הוא כתב 11.3%, ורק 2 מתוך 1,000 הערבובים הגיעו לכך: כהמלצה אחת מתשע מגיעה מ-49 החשבונות האלה, בעוד שהמקריות נותנת אחת משלוש עשרה, כלומר כ-50 אזכורים עודפים מתוך 1,471.

הריכוז אינו אחיד: שני סאב-רדיטים מעל המקריות, r/chefknives עם 14.9% מול 7.7% ו-r/knifeclub עם 12.4% מול 7.3%, בעוד r/knives, הגדול שבהם, נשאר בתוך חצי נקודת אחוז מהמקריות. כך גם לפי מותגים: מותג סכיני שף המסומן B003 מקבל 31.2% מההמלצות עליו מה"זנב" לעומת 8.0% צפויים, פי ארבעה מהמקריות, ו-B004 מקבל 26.1% לעומת 8.2%. המותגים מסומנים בקוד, משום שריכוז כשלעצמו אינו הוכחה שמישהו שילם.

מה הראו ההיסטוריות המלאות

ויג'ה גם שלף את ההיסטוריות המלאות ב-Reddit של 23 חשבונות "זנב" שעומדים מאחורי שלושת המותגים עם האות, וכן 23 חשבונות להשוואה. שמונה היסטוריות של "זנב" ושבע של קבוצת ההשוואה היו מוסתרות, מושעיות או מחוקות. בין השאר, גיל החשבון החציוני היה 4.5 שנים בשתי הקבוצות. רק 3% מתגובות ה"זנב" היו בשישה סאב-רדיטים של סכינים, לעומת 10% בקבוצת ההשוואה.

לאורך כל ההיסטוריה ה"זנב" הזכיר שבעה מותגי סכינים, לא אחד, וזה לדברי ויג'ה אינו מראה של חשבון "מחומם" עם מטרה אחת. הוא בדק שמונה מותגים ושישה סאב-רדיטים, ולכן שורה או שתיים עשויות להיראות חריגות בגלל המקריות; לא הביטוי הרגולרי של שרשורי הקנייה ולא מודל זיהוי המותגים הושוו לדגימות שמסומנות ביד; והמחקר מכסה שישה סאב-רדיטים ולא את Reddit כולו. העצה המעשית שלו: כשהמלצה מגיעה מחשבון לא מוכר, בדקו אם הוא אי פעם הזכיר מותג אחר.