Volatilita pozic App Store: kolik denního pohybu je normální?

Posun klíčového slova o jednu pozici není automaticky trend. Prozkoumali jsme 47 srovnatelných přechodů pozic, abychom vytvořili základní představu o tom, kolik pohybu se objeví ještě předtím, než ho dokážete vysvětlit.

Sledování pozic vytváří nebezpečné množství zdánlivé přesnosti. Graf ukazuje, že se aplikace posunula z druhého na třetí místo, čára zčervená a přirozený závěr je, že se něco pokazilo. Ale pozice je výstupem měnícího se trhu: konkurenti aktualizují, chování zákazníků se mění, hodnocení se hromadí a obchod neustále vyvíjí svůj vyhledávací systém. Jedno měření ti nemůže říct, který vstup měl vliv.

Užitečná otázka tedy není “did the number change?” Je to “is this movement larger or more persistent than the ordinary variation in the series?” Základní linie je to, co mění upozornění na pozici ze šumu na důkaz.

Co jsme měřili

Použili jsme první použitelnou kohortu opakovaných pozic AsoTheory: 11 sérií aplikace–klíčové slovo s alespoň čtyřmi zařazenými pozorováními ve Spojených státech. Kohorta obsahovala 58 měření a 47 sousedních párů, kde obě pozorování měla číselnou pozici. Pokrývala iOS a Android listingy pro Calm, Duolingo, Cal AI a IP Tools napříč výrazy včetně “meditation,” “sleep sounds,” “learn spanish,” “language learning,” “calorie,” “ip scanner” a “scan ip.”

Vypočítali jsme absolutní změnu mezi každým sousedním párem. Pohyb z prvního na třetí místo a pohyb z třetího na první se oba počítají jako dvě pozice, protože tento první průchod měří velikost, ne směr. Nezařazená pozorování byla vyloučena, místo aby byla převedena na vymyšlenou pozici.

Jak vypadaly jednotlivé série

Několik sérií bylo zcela plochých napříč pěti pozorováními: Duolingo drželo první místo pro “learn spanish” na obou obchodech; iOS listing držel první místo pro “language learning”; Calm držel páté místo pro “sleep sounds” na iOS a šesté místo pro “meditation” na Androidu. Tato stabilita je důležitá, protože ukazuje, že opakované měření nevytváří pohyb, když výsledek zůstává stejný.

Pohyblivé série byly skromné. Pozice Calm na Androidu pro “sleep sounds” střídala šesté a sedmé místo. Pozice Duolingo na Androidu pro “language learning” se posunula z prvního na druhé a zpět na první. IP Tools se posunul z druhého na první a pak třetí pro “ip scanner,”, což vytvořilo jediný dvoupozicový přechod v kohortě.

Proč se pozice může pohnout, když se tvůj listing nezměnil

Apple uvádí, že řazení ve vyhledávání používá textovou relevanci – včetně názvu, podtitulu, klíčových slov a primární kategorie – spolu s chováním uživatelů, jako jsou stažení, hodnocení a recenze. Apple také říká, že se systém neustále vyvíjí. Google popisuje podobně kontextový systém založený na relevanci dotazu, metadatech, kvalitě aplikace a tom, jak uživatelé reagují na výsledky. Ani jedna společnost nezveřejňuje deterministický vzorec.

To znamená, že nezměněný listing není nezměněný experiment. Jiná aplikace může změnit svá metadata. Nová hodnocení mohou změnit chování zákazníků. Vydání může zlepšit nebo poškodit signály kvality. Populace hledající daný výraz se může změnit. Pohyb o jedno místo je pozorování, ne diagnóza.

Praktické pravidlo pro upozornění

Co tato základní linie dokazuje – a co ne

Dokazuje to, že raná sledovaná kohorta byla většinou stabilní a že k jednopozicovým zvratům došlo bez dostatečných důkazů pro určení příčiny. Nedokazuje to, že jedna pozice je vždy šum, že výsledky v první desítce jsou univerzálně stabilní, nebo že větší pohyb byl způsoben metadaty. To vyžaduje širší panel a explicitní okna před a po.

Další verze této studie bude segmentovat pohyb podle platformy, země, hloubky pozice a kategorie. To je smysl denního sběru místo pořizování snímků obrazovky, když něco vypadá zajímavě: základní linie musí existovat před překvapením.

Související

Blog · Případové studie · Free ASO tools · Produkty · Soukromí a podmínky · AsoTheory