Zmienność pozycji w App Store: ile dziennego ruchu jest normalne?

Przesunięcie słowa kluczowego o jedno miejsce nie jest automatycznie trendem. Przeanalizowaliśmy 47 porównywalnych zmian pozycji, aby ustalić wczesny punkt odniesienia dla tego, ile ruchu pojawia się, zanim można go wyjaśnić.

Śledzenie rankingu tworzy niebezpieczną ilość pozornej precyzji. Wykres mówi, że aplikacja przesunęła się z drugiego na trzecie miejsce, linia robi się czerwona, a naturalny wniosek jest taki, że coś poszło nie tak. Ale pozycja to wynik zmieniającego się rynku: konkurenci aktualizują, zachowania klientów się zmieniają, oceny się kumulują, a sklep ciągle ewoluuje swój system wyszukiwania. Jeden odczyt nie powie ci, który czynnik miał znaczenie.

Przydatne pytanie nie brzmi zatem “did the number change?”, lecz “is this movement larger or more persistent than the ordinary variation in the series?”. Punkt odniesienia zamienia alert rankingowy z szumu w dowód.

Co zmierzyliśmy

Użyliśmy pierwszej użytecznej kohorty powtarzanych rankingów AsoTheory: 11 serii aplikacja–słowo kluczowe z co najmniej czterema obserwacjami rankingowymi w Stanach Zjednoczonych. Kohorta zawierała 58 odczytów i 47 sąsiadujących par, w których obie obserwacje miały ranking liczbowy. Obejmowała listy iOS i Android dla Calm, Duolingo, Cal AI i IP Tools dla terminów, w tym “meditation,” “sleep sounds,” “learn spanish,” “language learning,” “calorie,” “ip scanner” i “scan ip.”

Obliczyliśmy bezwzględną zmianę między każdą sąsiadującą parą. Ruch z pierwszego na trzecie i ruch z trzeciego na pierwsze liczą się jako dwie pozycje, ponieważ ten pierwszy przebieg mierzy wielkość, a nie kierunek. Obserwacje bez rankingu zostały wykluczone, zamiast zamieniać je na wymyśloną pozycję.

Jak wyglądały poszczególne serie

Kilka serii było całkowicie płaskich przez pięć obserwacji: Duolingo utrzymywał pierwsze miejsce dla “learn spanish” w obu sklepach; lista iOS utrzymywała pierwsze miejsce dla “language learning”; Calm utrzymywał piąte miejsce dla “sleep sounds” na iOS i szóste dla “meditation” na Androidzie. Ta stabilność ma znaczenie, ponieważ pokazuje, że powtarzany pomiar nie wytwarza ruchu, gdy wynik pozostaje bez zmian.

Ruchome serie były skromne. Ranking Calm na Androidzie dla “sleep sounds” oscylował między szóstym a siódmym miejscem. Ranking Duolingo na Androidzie dla “language learning” przesunął się z pierwszego na drugie i z powrotem na pierwsze. IP Tools przesunął się z drugiego na pierwsze, a potem na trzecie dla “ip scanner,”, tworząc jedyne przejście o dwie pozycje w kohorcie.

Dlaczego ranking może się zmienić, gdy twoja lista się nie zmieniła

Apple twierdzi, że ranking wyszukiwania wykorzystuje trafność tekstu — w tym tytuł, podtytuł, słowa kluczowe i kategorię główną — obok zachowań użytkowników, takich jak pobrania, oceny i recenzje. Apple mówi też, że system stale ewoluuje. Google opisuje podobnie kontekstowy system oparty na trafności zapytania, metadanych, jakości aplikacji i reakcjach użytkowników na wyniki. Żadna z firm nie publikuje deterministycznego wzoru.

To oznacza, że niezmieniona lista to nie niezmieniony eksperyment. Inna aplikacja może zmienić metadane. Nowe oceny mogą zmienić zachowania klientów. Wydanie może poprawić lub pogorszyć sygnały jakości. Populacja wyszukująca termin może się zmienić. Ruch o jedno miejsce to obserwacja, a nie diagnoza.

Praktyczna reguła alertu

Co ten punkt odniesienia udowadnia, a czego nie

Dowodzi, że wczesna śledzona kohorta była w większości stabilna i że odwrócenia o jedną pozycję występowały bez wystarczających dowodów, by przypisać przyczynę. Nie dowodzi, że jedna pozycja to zawsze szum, że wyniki z pierwszej dziesiątki są powszechnie stabilne, ani że większy ruch był spowodowany metadanymi. To wymaga szerszego panelu i wyraźnych okien przed i po.

Następna wersja tego badania podzieli ruch według platformy, kraju, głębokości rankingu i kategorii. To jest sens codziennego zbierania zamiast robienia zrzutów ekranu, gdy coś wygląda interesująco: punkt odniesienia musi istnieć przed niespodzianką.

Powiązane

Blog · Studia przypadków · Free ASO tools · Produkty · Prywatność i warunki · AsoTheory