App Store rank volatility: how much daily movement is normal?

A keyword moving one place is not automatically a trend. We examined 47 comparable rank transitions to establish an early baseline for how much movement appears even before you can explain it.

Theo dõi xếp hạng tạo ra một lượng lớn độ chính xác giả tạo nguy hiểm. Biểu đồ cho thấy ứng dụng di chuyển từ thứ hai xuống thứ ba, đường chuyển đỏ, và kết luận tự nhiên là có gì đó sai. Nhưng vị trí là đầu ra của một thị trường đang thay đổi: đối thủ cập nhật, hành vi khách hàng thay đổi, xếp hạng tích lũy, và cửa hàng tiếp tục phát triển hệ thống tìm kiếm. Một lần đọc không thể cho bạn biết yếu tố đầu vào nào quan trọng.

Câu hỏi hữu ích do đó không phải là “did the number change?” Mà là “is this movement larger or more persistent than the ordinary variation in the series?” Đường cơ sở là thứ biến cảnh báo xếp hạng từ nhiễu thành bằng chứng.

Chúng tôi đã đo gì

Chúng tôi sử dụng nhóm xếp hạng lặp lại đầu tiên có thể dùng của AsoTheory: 11 chuỗi ứng dụng–từ khóa với ít nhất bốn quan sát xếp hạng tại Hoa Kỳ. Nhóm chứa 58 lần đọc và 47 cặp liền kề mà cả hai quan sát có thứ hạng số. Nó bao phủ danh sách iOS và Android cho Calm, Duolingo, Cal AI và IP Tools trên các từ khóa bao gồm “meditation,” “sleep sounds,” “learn spanish,” “language learning,” “calorie,” “ip scanner” và “scan ip.”

Chúng tôi tính toán thay đổi tuyệt đối giữa mỗi cặp liền kề. Một di chuyển từ nhất lên ba và một di chuyển từ ba xuống nhất đều tính là hai vị trí vì lần đầu này đo độ lớn, không phải hướng. Các quan sát không xếp hạng bị loại trừ thay vì chuyển thành vị trí bịa đặt.

Các chuỗi riêng lẻ trông như thế nào

Một số chuỗi hoàn toàn phẳng qua năm quan sát: Duolingo giữ vị trí nhất cho “learn spanish” trên cả hai cửa hàng; danh sách iOS giữ vị trí nhất cho “language learning”; Calm giữ vị trí thứ năm cho “sleep sounds” trên iOS và thứ sáu cho “meditation” trên Android. Sự ổn định đó quan trọng vì nó cho thấy việc đo lặp lại không tạo ra biến động khi kết quả giữ nguyên.

Các chuỗi biến động ở mức khiêm tốn. Xếp hạng Android của Calm cho “sleep sounds” xen kẽ giữa thứ sáu và thứ bảy. Xếp hạng Android của Duolingo cho “language learning” di chuyển từ nhất xuống nhì rồi trở lại nhất. IP Tools di chuyển từ nhì lên nhất rồi xuống ba cho “ip scanner,” tạo ra lần chuyển tiếp hai vị trí duy nhất trong nhóm.

Tại sao xếp hạng có thể di chuyển khi danh sách của bạn không thay đổi

Apple cho biết xếp hạng tìm kiếm sử dụng mức độ liên quan của văn bản—bao gồm tiêu đề, phụ đề, từ khóa và danh mục chính—cùng với hành vi người dùng như lượt tải xuống, xếp hạng và đánh giá. Apple cũng cho biết hệ thống liên tục phát triển. Google mô tả một hệ thống theo ngữ cảnh tương tự dựa trên mức độ liên quan của truy vấn, siêu dữ liệu, chất lượng ứng dụng và cách người dùng phản hồi với kết quả. Không công ty nào công bố công thức xác định.

Điều đó có nghĩa là một danh sách không thay đổi không phải là một thí nghiệm không thay đổi. Ứng dụng khác có thể thay đổi siêu dữ liệu. Xếp hạng mới có thể thay đổi hành vi khách hàng. Một bản phát hành có thể cải thiện hoặc làm hỏng tín hiệu chất lượng. Nhóm người tìm kiếm từ khóa có thể thay đổi. Một biến động một vị trí là một quan sát, không phải là chẩn đoán.

Một quy tắc cảnh báo thực tế

Đường cơ sở này chứng minh—và không chứng minh—điều gì

Nó chứng minh rằng nhóm được theo dõi ban đầu hầu hết ổn định và các đảo ngược một vị trí xảy ra mà không đủ bằng chứng để quy nguyên nhân. Nó không chứng minh rằng một vị trí luôn là nhiễu, rằng kết quả top mười ổn định phổ biến, hoặc rằng một biến động lớn hơn do siêu dữ liệu gây ra. Những điều đó cần một bảng rộng hơn và các cửa sổ trước-sau rõ ràng.

Phiên bản tiếp theo của nghiên cứu này sẽ phân đoạn biến động theo nền tảng, quốc gia, độ sâu xếp hạng và danh mục. Đó là lý do thu thập hàng ngày thay vì chụp màn hình khi có gì đó thú vị: đường cơ sở phải tồn tại trước khi bất ngờ xảy ra.

Liên quan

Blog · Nghiên cứu tình huống · Free ASO tools · Sản phẩm · Quyền riêng tư và điều khoản · AsoTheory