Geo Experiment là gì? Cách đo quảng cáo bằng thử nghiệm theo khu vực

Geo experiment (thử nghiệm theo khu vực địa lý) là cách đo tác động của quảng cáo bằng cách thay đổi hoạt động marketing ở một số khu vực (vùng thử nghiệm) và giữ nguyên ở các khu vực tương đồng (vùng đối chứng), rồi so sánh kết quả kinh doanh giữa hai bên. Chênh lệch sau khi đã điều chỉnh cho khác biệt vốn có được gọi là geo lift.

Khái niệm tác động tăng thêm, sự khác nhau giữa incrementality và attribution đã có trong bài incrementality là gì. Bài này không nhắc lại phần đó mà đi vào thiết kế một geo test cụ thể: chọn đơn vị vùng, ghép cặp, chọn kiểu can thiệp, định thời lượng, đọc kết quả và kiểm tra rò rỉ giữa các vùng.

Khi nào geo experiment là lựa chọn hợp lý

Điểm mạnh của geo test là không cần theo dõi từng người: chỉ cần tổng doanh thu hoặc số đơn theo vùng từ hệ thống bán hàng. Vì vậy nó ít bị ảnh hưởng khi trình duyệt chặn cookie hay khi khách mua qua điện thoại thay vì qua website — những chỗ mà số liệu marketing attribution thường hụt.

Dữ liệu và điều kiện cần chuẩn bị

• Số đơn, doanh thu theo vùng theo ngày hoặc tuần, lấy từ hệ thống bán hàng hoặc đơn vị vận chuyển, càng dài càng tốt.
• Chi phí quảng cáo theo vùng trong cùng giai đoạn.
• Danh sách sự kiện đặc biệt theo vùng: khai trương, bão lũ, lễ hội địa phương.
• Khả năng nhắm vị trí trên nền tảng quảng cáo, và hiểu tuỳ chọn nhắm theo người đang ở trong vùng hay người quan tâm đến vùng.
• Người biết đọc số — nếu không có, nhờ tư vấn ngay từ khâu thiết kế.

Thiết kế geo experiment 6 bước

Bước 1. Chọn khu vực có dữ liệu đủ

Đơn vị vùng phải đủ lớn để có số đơn ổn định mỗi tuần, nhưng đủ nhiều để chia được hai nhóm. Với shop bán toàn quốc, đơn vị thường là tỉnh hoặc nhóm tỉnh; với chuỗi cửa hàng trong một thành phố, có thể là quận. Loại bỏ vùng quá nhỏ (dao động lớn) và vùng quá khác biệt (thành phố lớn nhất thường chiếm phần lớn doanh thu, nên để riêng hoặc loại khỏi test). Trước khi chạy, lấy dữ liệu lịch sử và làm một phép thử giả: chia vùng ngẫu nhiên, so sánh hai nhóm trong giai đoạn không có can thiệp. Mức chênh lệch tự nhiên này cho biết tác động phải lớn cỡ nào mới thấy được.

Bước 2. Ghép vùng tương đồng

Ghép các vùng có xu hướng doanh thu lịch sử đi cùng nhau: tăng giảm cùng thời điểm, cùng mùa vụ. Hai tỉnh có quy mô khác nhau vẫn ghép được nếu đường xu hướng song song. Sau khi ghép cặp, chọn ngẫu nhiên bên nào nhận can thiệp — đừng chọn vùng mình tin là “tiềm năng” để chạy, vì khi đó kết quả phản ánh niềm tin của bạn chứ không phải tác động của quảng cáo.

Bước 3. Xác định thời gian thử

Một geo test có ba giai đoạn: giai đoạn trước (dữ liệu lịch sử để dựng mối quan hệ giữa hai nhóm), giai đoạn thử (can thiệp diễn ra) và giai đoạn sau (theo dõi tác động kéo dài sau khi dừng). Giai đoạn thử cần bao được ít nhất một chu kỳ mua bình thường của khách, và tránh các mốc làm nhiễu như Tết hay ngày sale lớn. Chốt thời lượng trước, không dừng sớm khi thấy số đẹp.

Bước 4. Giữ can thiệp rõ ràng

Chọn một kiểu can thiệp: tắt (go-dark — dừng quảng cáo ở vùng thử, đo phần mất đi), tăng (heavy-up — tăng ngân sách ở vùng thử, đo phần tăng thêm) hoặc bật mới (chạy kênh mới chỉ ở vùng thử). Chỉ thay đổi đúng một thứ; mọi hoạt động khác như giá, ưu đãi, nội dung fanpage phải giống nhau giữa hai nhóm. Ghi rõ can thiệp vào tài liệu thiết kế, kể cả mức ngân sách, để sau này biết kết quả áp dụng cho mức chi nào khi đưa vào media plan kỳ sau.

Bước 5. Đo chênh lệch sau điều chỉnh

Không so con số tuyệt đối giữa hai nhóm. Dùng giai đoạn trước để xác định quan hệ bình thường, ví dụ vùng thử thường bằng khoảng 1,2 lần vùng đối chứng. Trong giai đoạn thử, doanh thu dự kiến của vùng thử nếu không can thiệp = doanh thu vùng đối chứng × hệ số đó. Phần chênh giữa thực tế và dự kiến là ước tính geo lift. Các phương pháp nâng cao hơn (như dựng vùng đối chứng tổng hợp từ nhiều vùng) theo cùng logic này. Báo kết quả kèm khoảng dao động dựa trên phép thử giả ở bước 1.

Bước 6. Kiểm tra hiệu ứng lan truyền

Ranh giới địa lý trong quảng cáo không kín: người sống ở vùng đối chứng làm việc ở vùng thử, tuỳ chọn nhắm vị trí có thể bao gồm người “quan tâm” đến vùng chứ không chỉ người đang ở đó, và nội dung có thể được chia sẻ ra ngoài. Chọn vùng không liền kề nhau khi có thể, đặt nhắm vị trí theo người đang ở trong vùng, và kiểm tra xem vùng đối chứng có nhận lượt hiển thị nào không. Lan truyền thường làm giảm chênh lệch đo được, nên kết quả khi đó là ước tính thận trọng.

Ví dụ thực hành: shop thời trang online bán toàn quốc

Ví dụ giả định: một shop thời trang nữ bán online, đơn giao đi nhiều tỉnh, muốn biết tăng ngân sách video quảng cáo có thật sự kéo thêm đơn hay chỉ lấy đơn vốn sẽ có. Shop loại hai thành phố lớn nhất khỏi test, ghép 10 tỉnh còn lại thành 5 cặp có xu hướng đơn hàng 6 tháng tương tự, chọn ngẫu nhiên một tỉnh mỗi cặp để tăng gấp đôi ngân sách video trong 4 tuần.

Trong ví dụ, chi phí tăng thêm cho mỗi đơn tăng thêm khoảng 200.000đ. Shop so con số này với lợi nhuận gộp mỗi đơn để quyết định, thay vì nhìn ROAS mà nền tảng tự báo. Nhưng phép thử giả trên dữ liệu cũ cho thấy chênh lệch tự nhiên giữa hai nhóm có thể dao động khoảng ±15 đơn/tuần, nên kết luận thận trọng là “có dấu hiệu tác động dương, cần lặp lại để thu hẹp khoảng dao động”, không phải “quảng cáo chắc chắn mang về 30 đơn”.

AI làm được gì, không làm được gì

• Làm tốt: soạn tài liệu thiết kế test (giả thuyết, vùng, kiểu can thiệp, thời lượng, rủi ro nhiễu); giải thích phép tính hệ số và chênh lệch; viết báo cáo kết quả dễ hiểu cho chủ doanh nghiệp.
• Cần kiểm tra kỹ: gợi ý ghép cặp vùng từ bảng số liệu bạn đưa — kiểm lại bằng biểu đồ xu hướng.
• Không làm được: đảm bảo phép tính thống kê đúng khi dữ liệu bẩn, hay biết sự kiện địa phương làm nhiễu nếu bạn không ghi lại.

Sai lầm thường gặp

• Chọn vùng “tốt” để chạy thay vì chọn ngẫu nhiên sau khi ghép cặp.
• So sánh con số tuyệt đối giữa hai nhóm có quy mô khác nhau.
• Bỏ qua phép thử giả, nên không biết chênh lệch đo được có vượt dao động tự nhiên không.
• Để vùng đối chứng vẫn nhận quảng cáo do cài đặt nhắm vị trí rộng.
• Đổi giá hoặc tung khuyến mãi chỉ ở một nhóm giữa chừng.
• Suy rộng kết quả cho thành phố lớn đã bị loại khỏi test.

Câu hỏi thường gặp