תנודתיות דירוג ב-App Store: כמה תנועה יומית היא נורמלית?

מילת מפתח שזזה מקום אחד אינה בהכרח מגמה. בדקנו 47 מעברי דירוג דומים כדי לקבוע קו בסיס מוקדם לכמה תנועה מופיעה אפילו לפני שניתן להסביר אותה.

מעקב דירוג יוצר כמות מסוכנת של דיוק לכאורה. תרשים אומר שאפליקציה זזה מהמקום השני לשלישי, הקו הופך לאדום, והמסקנה הטבעית היא שמשהו השתבש. אבל מיקום הוא פלט של שוק משתנה: מתחרים מתעדכנים, התנהגות לקוחות משתנה, דירוגים מצטברים, והחנות ממשיכה לפתח את מערכת החיפוש שלה. קריאה אחת לא יכולה לומר לך איזה קלט השפיע.

השאלה השימושית היא לכן לא “did the number change?” אלא “is this movement larger or more persistent than the ordinary variation in the series?” קו בסיס הוא מה שהופך התראת דירוג מרעש לראיה.

מה מדדנו

השתמשנו בקבוצת הדירוג החוזר הראשונה השמישה של AsoTheory: 11 סדרות אפליקציה–מילת מפתח עם לפחות ארבע תצפיות מדורגות בארצות הברית. הקבוצה הכילה 58 קריאות ו-47 זוגות סמוכים שבהם לשתי התצפיות היה דירוג מספרי. היא כיסתה רישומי iOS ואנדרואיד עבור Calm, Duolingo, Cal AI ו-IP Tools על פני מונחים כולל “meditation,” “sleep sounds,” “learn spanish,” “language learning,” “calorie,” “ip scanner” ו-“scan ip.”

חישבנו את השינוי המוחלט בין כל זוג סמוך. מהלך מראשון לשלישי ומהלך משלישי לראשון נספרים שניהם כשני מיקומים כי המעבר הראשון הזה מודד גודל, לא כיוון. תצפיות לא מדורגות הוצאו במקום להמיר אותן למיקום מומצא.

איך נראו הסדרות הבודדות

כמה סדרות היו שטוחות לחלוטין לאורך חמש תצפיות: Duolingo החזיק במקום הראשון עבור “learn spanish” בשתי החנויות; הרישום ב-iOS החזיק במקום הראשון עבור “language learning”; Calm החזיק במקום החמישי עבור “sleep sounds” ב-iOS ובמקום השישי עבור “meditation” באנדרואיד. היציבות הזו חשובה כי היא מראה שמדידה חוזרת לא מייצרת תנועה כשהתוצאה נשארת במקומה.

הסדרות הנעות היו צנועות. דירוג האנדרואיד של Calm עבור “sleep sounds” התחלף בין שישי לשביעי. דירוג האנדרואיד של Duolingo עבור “language learning” זז מראשון לשני וחזרה לראשון. IP Tools זז משני לראשון ואז לשלישי עבור “ip scanner,” ויצר את המעבר היחיד של שני מיקומים בקבוצה.

למה דירוג יכול לזוז כשהרישום שלך לא השתנה

אפל אומרת שדירוג החיפוש משתמש ברלוונטיות טקסט—כולל הכותרת, כותרת המשנה, מילות המפתח והקטגוריה הראשית—לצד התנהגות משתמשים כמו הורדות, דירוגים וביקורות. אפל גם אומרת שהמערכת מתפתחת ללא הרף. גוגל מתארת מערכת הקשרית דומה המבוססת על רלוונטיות השאילתה, מטא-דאטה, איכות האפליקציה ואיך משתמשים מגיבים לתוצאות. אף חברה לא מפרסמת נוסחה דטרמיניסטית.

זה אומר שרישום ללא שינוי אינו ניסוי ללא שינוי. אפליקציה אחרת יכולה לשנות את המטא-דאטה שלה. דירוגים חדשים יכולים לשנות התנהגות לקוחות. גרסה חדשה יכולה לשפר או לפגוע באותות איכות. אוכלוסיית המחפשים את המונח יכולה להשתנות. מהלך של מקום אחד הוא תצפית, לא אבחנה.

כלל התראה מעשי

מה קו הבסיס הזה מוכיח—ומה לא

זה מוכיח שקבוצת המעקב המוקדמת הייתה יציבה ברובה ושהתהפכויות של מיקום אחד התרחשו בלי מספיק ראיות לייחס סיבה. זה לא מוכיח שמיקום אחד הוא תמיד רעש, שתוצאות העשירייה הראשונה יציבות באופן אוניברסלי, או שמהלך גדול יותר נגרם על ידי מטא-דאטה. אלה דורשים פאנל רחב יותר וחלונות לפני-אחרי מפורשים.

הגרסה הבאה של המחקר הזה תפלח תנועה לפי פלטפורמה, מדינה, עומק דירוג וקטגוריה. זו הנקודה באיסוף יומי במקום צילומי מסך כשמשהו נראה מעניין: קו הבסיס חייב להתקיים לפני ההפתעה.

קשור

בלוג · מקרי בוחן · Free ASO tools · מוצרים · פרטיות ותנאים · AsoTheory