A/B Test CPP trong Adapty Ads Manager
A/B Test CPP cho phép bạn so sánh các trang sản phẩm tùy chỉnh (CPP) với nhau trong Apple Ads. Bạn chọn từ 2 đến 4 trang sản phẩm, và Adapty Ads Manager sẽ luân phiên phân phối traffic giữa chúng, thu thập dữ liệu hiệu suất, và cho bạn biết trang nào có tỷ lệ chuyển đổi tốt nhất. Bạn có thể đưa trang sản phẩm mặc định của mình vào như một trong các biến thể, để kiểm tra xem trang tùy chỉnh có hiệu quả hơn trang mặc định hiện tại hay không.
Điều kiện tiên quyết
Trước khi tạo CPP A/B test, hãy đảm bảo:
- Apple Ads Manager đã được kết nối: Làm theo hướng dẫn cài đặt nếu bạn chưa thực hiện.
- Nhóm quảng cáo nguồn có lưu lượng truy cập: Nhóm quảng cáo bạn muốn kiểm tra phải ít nhất 28 ngày tuổi và có lượt hiển thị, lượt nhấn, và lượt cài đặt trong khoảng thời gian đó. Apple Ads Manager sử dụng lịch sử này để ước tính thời gian chạy test và kích thước mẫu cần thiết.
- Bạn có ít nhất một trang sản phẩm tùy chỉnh: Tạo CPPs trong App Store Connect trước. Apple Ads Manager sẽ đọc chúng tự động.
Tạo CPP A/B test
Để tạo test, trong thanh bên trái, vào CPP A/B Tests và nhấn Create A/B Tests.
Trình hướng dẫn có bốn bước: Ad Group(s), Ad Creative(s), Testing Method, và Review.
1. Ad Group(s)
Nhập Test Name và nhấn Select Ad Group để chọn nhóm quảng cáo chứa các CPP bạn muốn kiểm tra. Bạn có thể chọn tối đa bốn nhóm quảng cáo từ cùng một chiến dịch, nhưng chỉ khi bạn muốn kiểm tra một ad creative duy nhất cho tất cả chúng. Để so sánh nhiều CPP, hãy chọn một nhóm quảng cáo.
2. Ad Creative(s)
Chọn các CPP bạn muốn so sánh. Bạn có thể thêm Default Product Page (được đánh dấu là Control) cùng tối đa ba Custom Product Pages, tổng cộng từ 2 đến 4 biến thể.
- Default Product Page: Nhấn + Add Default để thêm trang sản phẩm mặc định hiện tại làm biến thể kiểm soát.
- Custom Product Pages: Nhấn + Select CPP để chọn trang sản phẩm tùy chỉnh từ App Store Connect.
3. Phương pháp kiểm tra
Cấu hình cách thức chạy test. Adapty Ads Manager tự động tính toán Calculated Test Duration, Start Time, và End Time — các giá trị sẽ cập nhật mỗi khi bạn thay đổi một trong ba cài đặt dưới đây.
Switch Time Preset
Tần suất hệ thống luân chuyển giữa các biến thể. Nếu bạn chọn giá trị quá cao so với lưu lượng truy cập thực tế, hệ thống sẽ tự động hạ xuống mức phù hợp.
| Khoảng thời gian | Mức lưu lượng truy cập thông thường | Thời lượng slot | Độ dài test thông thường |
|---|---|---|---|
| Hourly | Cao (5.000+ lượt hiển thị mỗi ngày) | 7 giờ | Vài ngày |
| Daily | Bình thường | 24 giờ | Vài tuần |
| Weekly | Thấp (ít hơn 400 lượt hiển thị mỗi ngày) | 7 ngày | Vài tháng |
Slot là khoảng thời gian cơ bản mà một biến thể chạy trước khi hệ thống xem xét chuyển sang biến thể tiếp theo.
Độ chính xác mong muốn
Mức chênh lệch nhỏ nhất về tỷ lệ chuyển đổi mà A/B test có thể phát hiện một cách đáng tin cậy. Các tùy chọn: 1%, 2%, 3%, 4%, 5%. Mặc định: 5%. A/B test với độ chính xác 1% có thể phát hiện những khác biệt rất nhỏ nhưng cần nhiều dữ liệu hơn và chạy lâu hơn. A/B test với độ chính xác 5% kết thúc nhanh hơn nhưng chỉ phát hiện được những khác biệt lớn hơn.
| Độ chính xác | Khi nào nên dùng |
|---|---|
| 1–2% | Bạn mong đợi sự khác biệt nhỏ giữa các CPP và có nhóm quảng cáo có lưu lượng truy cập cao. |
| 3–4% | Mặc định cân bằng cho hầu hết các bài kiểm tra. |
| 5% | Bạn mong đợi có người chiến thắng rõ ràng và muốn có kết quả nhanh chóng. |
Mức độ tin cậy
Bạn muốn chắc chắn đến mức nào rằng kết quả là thật chứ không phải nhiễu ngẫu nhiên. Các tùy chọn: 80%, 85%, 90%, 95%, 99%. Mặc định: 90%. Mức độ tin cậy càng cao thì càng cần nhiều dữ liệu hơn.
| Độ tin cậy | Đánh đổi |
|---|---|
| 80–85% | Kết thúc nhanh hơn, nhưng khả năng kết quả là nhiễu cao hơn. |
| 90% | Mặc định được khuyến nghị cho hầu hết các test. |
| 95–99% | Bảo thủ nhất. Cần nhiều dữ liệu và thời gian test dài nhất. |
4. Review
Kiểm tra lại tóm tắt — các nhóm quảng cáo đã chọn, creatives, phương pháp kiểm tra, thời gian, độ chính xác, và mức độ tin cậy — rồi nhấn Start CPP A/B Tests.
Sau khi bạn bắt đầu test, hệ thống sẽ sao chép nhóm quảng cáo cho mỗi biến thể, kích hoạt biến thể đầu tiên, và trạng thái test chuyển sang Running trong vài phút.
Theo dõi test đang chạy
Để mở danh sách test, vào CPP A/B Tests ở thanh sidebar bên trái. Bốn tab ở đầu trang lọc test theo trạng thái:
- Live: Các test đang chạy.
- Completed: Các test đã hoàn thành.
- Draft: Các test chưa được bắt đầu.
- Archive: Các test cũ mà bạn không cần hiển thị ở màn hình chính nữa.
Mỗi thẻ test hiển thị tên, trạng thái, khoảng thời gian chuyển đổi, độ chính xác mong muốn và thời gian đã chạy. Nhấp View metrics để mở rộng bảng biến thể.
Hiệu suất biến thể
Bảng biến thể so sánh hiệu suất của tất cả các biến thể trong A/B test:
| Cột | Mô tả |
|---|---|
| Variant Name | CPP đang được kiểm tra. Biến thể A luôn là biến thể đầu tiên bạn thêm vào. |
| Confidence Level | Mức độ gần đạt kích thước mẫu yêu cầu của biến thể, tính theo phần trăm từ 0 đến 100. |
| Impressions | Số lần Apple hiển thị quảng cáo cho biến thể này. |
| TTR | Tỷ lệ nhấn qua (tap-through rate): số lần nhấn chia cho số lần hiển thị. |
| Tap → Download CR | Tỷ lệ chuyển đổi từ nhấn sang tải xuống. |
| CPT | Chi phí trung bình mỗi lần nhấn. |
| Avg CPA (Tap-Through) | Chi phí thu hút khách hàng trung bình dựa trên lượt tải xuống qua tap-through. |
| Spend | Tổng chi tiêu được ghi nhận cho biến thể. |
| Revenue | Tổng doanh thu được ghi nhận cho biến thể. |
| ROAS | Lợi nhuận trên chi tiêu quảng cáo: doanh thu chia cho chi tiêu. |
| Cho đến khi mỗi biến thể có số lần hiển thị tương đương nhau, Adapty Ads Manager sẽ không đánh dấu người chiến thắng. Trong khi dữ liệu vẫn đang được thu thập, bạn sẽ thấy một thông báo phía trên bảng: Winner highlighting is paused — variants don’t have comparable impressions yet. |
Chỉ số chi tiết
Để xem chi tiết hơn về test, nhấn View metrics để mở trang chỉ số chi tiết. Trang này bao gồm đường cong giữ chân cohort, so sánh ARPPU và bảng chỉ số được nhóm thành hai phần:
- Top of funnel · Apple Search Ads: TTR, Download Rate, CPM, CPT và Avg CPA theo từng biến thể.
- Bottom of funnel · Monetization: Paid users, Paid CR, Cost per Paid, ARPPU, Revenue và ROAS theo từng biến thể. Cột Winner hiển thị biến thể dẫn đầu trên từng chỉ số. Một biến thể chỉ được công nhận là người chiến thắng tổng thể khi dẫn đầu trên chỉ số chính và đạt mức độ tin cậy ít nhất 95%.
Để xem định nghĩa các chỉ số, hãy tham khảo Chỉ số trong Adapty Ads Manager.
Dừng test
Bạn có thể dừng test bất cứ lúc nào. Test sẽ được đánh dấu là Stopped, nhóm quảng cáo gốc sẽ được khôi phục, và các nhóm quảng cáo đã sao chép sẽ bị tạm dừng.
Để dừng test đang chạy:
- Vào CPP A/B Tests trong thanh bên trái.
- Nhấn Stop A/B test trên thẻ test, hoặc mở test và nhấn Stop Test.
- Xác nhận trong hộp thoại Stop A/B Test?.
Dừng test là hành động cuối cùng — bạn không thể tiếp tục lại. Kết quả đã thu thập được vẫn có sẵn trong tab Completed.
Trạng thái của A/B test
Mỗi A/B test đều trải qua một tập hợp trạng thái cố định:
| Trạng thái | Ý nghĩa |
|---|---|
| Draft | A/B test đã được tạo nhưng chưa bắt đầu. Bạn vẫn có thể chỉnh sửa. |
| Starting | Đang thiết lập — hệ thống đang sao chép các nhóm quảng cáo và tạo quảng cáo. |
| Running | A/B test đang chạy. Các biến thể được luân phiên và các chỉ số đang được thu thập. |
| Completed | Thời gian đã lên lịch hết hạn hoặc đã đạt đến độ tin cậy. Nhóm quảng cáo gốc được khôi phục. |
| Stopped | Bạn đã dừng A/B test theo cách thủ công. Nhóm quảng cáo gốc được khôi phục. |
| Failed | Thiết lập thất bại hoặc xảy ra quá nhiều lỗi liên tiếp. Bạn có thể khởi động lại A/B test bị lỗi. |
Cách thức hoạt động
Adapty Ads Manager sử dụng phương pháp Ad Group Switch:
- Khi bắt đầu test, hệ thống sao chép nhóm quảng cáo nguồn một lần cho mỗi biến thể. Mỗi bản sao trỏ đến một CPP khác nhau (một trong số đó có thể là trang mặc định của bạn).
- Mỗi lần chỉ có một bản sao chạy. Hệ thống luân phiên bản sao nào đang hoạt động theo lịch cố định (theo giờ, ngày hoặc tuần).
- Nhóm quảng cáo gốc bị tạm dừng trong thời gian test. Nó sẽ được khôi phục về trạng thái trước đó khi test kết thúc.
- Adapty Ads Manager thu thập số lượt hiển thị, lượt nhấn và lượt tải xuống cho từng biến thể, đồng thời theo dõi mức độ mỗi biến thể đã tiến gần đến mẫu có ý nghĩa thống kê.
- Test tự động kết thúc khi mỗi biến thể có đủ dữ liệu, hoặc khi đạt đến thời hạn đã đặt.
Những điều cần biết khi test đang chạy
Dưới đây là một số điều cần lưu ý về cách A/B test hoạt động trên dashboard khi đang chạy:
- Các biến thể không chuyển đổi theo đồng hồ cố định: Khoảng thời gian chuyển đổi chỉ là mốc cơ bản, nhưng Adapty Ads Manager sẽ điều chỉnh thời điểm để mỗi biến thể thu thập được lượng hiển thị công bằng. Một biến thể có thể duy trì lâu hơn một slot nếu nó còn thiếu lượt hiển thị.
- Thời gian kết thúc có thể bị dời lại: Nếu một biến thể còn thiếu dữ liệu khi đến gần thời điểm kết thúc đã lên lịch, A/B test sẽ tự động được kéo dài để tiếp tục thu thập lượt nhấp. Thời gian kết thúc mới sẽ hiển thị trên thẻ test.
- Khi test kết thúc, nhóm quảng cáo gốc được khôi phục: Tất cả các nhóm quảng cáo đã clone sẽ bị tạm dừng và nhóm quảng cáo nguồn trở về trạng thái trước khi test. Kết quả vẫn có thể xem trong tab Completed.