ปิดแอดสองอาทิตย์เพื่อพิสูจน์ว่ามันได้ผลจริง เมื่อไหร่ที่การทดสอบ Incrementality คุ้มเสียงบไปทดลอง

เจ้าของร้านคนหนึ่งเคยตั้งคำถามที่ฟังดูง่ายแต่ตอบยากมากว่า 'ถ้าผมหยุดยิงแอดไปเลย ยอดขายจะหายไปเท่าไหร่จริง ๆ' คำถามนี้สำคัญมากเพราะรายงานของแพลตฟอร์มบอกแค่ว่าใครเห็นโฆษณาแล้วซื้อ แต่ไม่ได้บอกว่าคนกลุ่มนั้นจะซื้ออยู่ดีแม้ไม่เห็นโฆษณาเลยหรือเปล่า

คนจำนวนไม่น้อยซื้อของเพราะรู้จักร้านอยู่แล้ว หรือกำลังจะกลับมาซื้อซ้ำอยู่แล้วโดยไม่ต้องพึ่งโฆษณา ถ้าแพลตฟอร์มนับคนกลุ่มนี้เป็น conversion ที่มาจากแอด คุณอาจกำลังจ่ายเงินเพื่อ 'แย่งเครดิต' จากยอดขายที่จะเกิดขึ้นอยู่แล้ว ไม่ใช่สร้างยอดขายใหม่จริง ๆ

Incrementality คืออะไร และต่างจากตัวเลข conversion ปกติยังไง

ตัวเลข conversion ที่แพลตฟอร์มรายงานตอบคำถามว่า 'ใครเห็นโฆษณาแล้วซื้อ' ซึ่งเป็นความสัมพันธ์ที่อาจไม่ใช่เหตุและผลเสมอไป ในขณะที่ Incrementality พยายามตอบคำถามที่ต่างออกไปคือ 'มียอดขายเพิ่มขึ้นจริงเท่าไหร่ เมื่อเทียบกับถ้าไม่มีโฆษณาเลย' ซึ่งเป็นคำถามที่วัดผลกระทบเชิงเหตุผลจริง ๆ

วิธีวัดที่ใช้กันทั่วไปคือแบ่งกลุ่มเป้าหมายเป็นสองกลุ่มแบบสุ่ม กลุ่มหนึ่งยังเห็นโฆษณาตามปกติ อีกกลุ่มถูกกันไม่ให้เห็นโฆษณาชั่วคราว แล้วเทียบยอดขายของสองกลุ่มนี้ ส่วนต่างที่เกิดขึ้นคือยอดขายที่โฆษณาสร้างเพิ่มขึ้นจริง ไม่ใช่แค่ยอดที่จะเกิดขึ้นอยู่แล้ว

ต้นทุนของการทดสอบที่มักถูกมองข้าม

• เสียโอกาสขายในช่วงทดสอบ กลุ่มที่ถูกกันไม่ให้เห็นโฆษณาอาจมียอดขายลดลงจริงในช่วงนั้น ซึ่งเป็นต้นทุนที่ต้องยอมรับเพื่อแลกกับข้อมูลที่แม่นยำกว่า
• ต้องใช้เวลาพอสมควรถึงจะได้ข้อมูลที่เชื่อถือได้ การทดสอบสั้นเกินไปอาจให้ผลที่ผันผวนจากปัจจัยระยะสั้น ไม่ได้สะท้อนภาพจริง
• ต้องมีปริมาณข้อมูลมากพอในทั้งสองกลุ่ม ธุรกิจที่มียอดขายต่อวันน้อยอยู่แล้วอาจต้องใช้เวลานานกว่าจะได้ผลที่มีนัยสำคัญทางสถิติ

เมื่อไหร่ที่การทดสอบนี้คุ้มค่าที่จะทำ

การทดสอบ incrementality เหมาะกับธุรกิจที่มีงบโฆษณาก้อนใหญ่พอสมควรและใช้มานานจนสงสัยว่าส่วนหนึ่งของงบอาจกำลังจ่ายซ้ำให้กับลูกค้าที่จะซื้ออยู่แล้ว โดยเฉพาะแคมเปญที่ยิงหาลูกค้าเก่าซ้ำ ๆ ซึ่งมีความเสี่ยงสูงที่จะแย่งเครดิตจากยอดขายที่เกิดขึ้นอยู่แล้วมากกว่าแคมเปญหาลูกค้าใหม่

ธุรกิจที่งบยังเล็กหรือเพิ่งเริ่มยิงแอดอาจยังไม่ถึงจุดที่ควรลงทุนเวลาและงบไปกับการทดสอบแบบนี้ เพราะต้นทุนโอกาสจากการหยุดหรือลดแอดชั่วคราวอาจสูงกว่าประโยชน์ที่ได้ในสัดส่วนของธุรกิจขนาดนั้น ควรให้ความสำคัญกับการสร้างฐานลูกค้าให้แน่นก่อน

วิธีทดสอบแบบเบา ๆ สำหรับร้านที่ไม่พร้อมทำเต็มรูปแบบ

1. เริ่มจากพื้นที่หรือกลุ่มเป้าหมายเล็ก ๆ ที่ไม่กระทบยอดขายรวมมากเกินไป แทนที่จะทดสอบกับทั้งแคมเปญในคราวเดียว
2. เลือกช่วงเวลาที่ไม่ใช่ฤดูกาลพีคของธุรกิจ เพื่อลดความเสี่ยงที่การหยุดแอดจะกระทบยอดขายรวมมากเกินไป
3. เทียบยอดขายของกลุ่มที่หยุดแอดกับกลุ่มที่ยังยิงอยู่ในช่วงเวลาเดียวกัน ไม่ใช่เทียบกับเดือนก่อนหน้า เพราะปัจจัยตามฤดูกาลอาจทำให้ผลลัพธ์เพี้ยน
4. ใช้ผลที่ได้ปรับสัดส่วนงบระหว่างแคมเปญหาลูกค้าใหม่กับแคมเปญยิงซ้ำลูกค้าเก่า แทนที่จะตัดงบทั้งหมดออกจากผลทดสอบเพียงครั้งเดียว

สรุป

รายงาน conversion ที่เห็นในหน้าแดชบอร์ดตอบคำถามว่าใครซื้อหลังเห็นโฆษณา แต่ไม่ได้ตอบว่ายอดนั้นเกิดขึ้น 'เพิ่ม' จริงหรือเปล่า การทดสอบ incrementality คือวิธีเดียวที่จะรู้คำตอบนั้น แต่มีต้นทุนที่ต้องยอมจ่ายก่อนจะได้คำตอบมา

ก่อนตัดสินใจทำ ให้ชั่งน้ำหนักระหว่างขนาดงบที่สงสัยว่าอาจสูญเปล่ากับต้นทุนโอกาสที่ต้องเสียไปช่วงทดสอบ ถ้างบก้อนที่สงสัยใหญ่พอ การลงทุนเวลาทดสอบสักครั้งมักคุ้มค่ากว่าจ่ายซ้ำต่อไปโดยไม่รู้คำตอบ

• Incrementality วัดว่ายอดขายเพิ่มขึ้นจริงเท่าไหร่จากโฆษณา ต่างจาก conversion ปกติที่แค่บอกว่าใครเห็นแล้วซื้อ
• ต้นทุนหลักคือโอกาสขายที่เสียไปในกลุ่มควบคุมช่วงทดสอบ ต้องชั่งน้ำหนักกับขนาดงบที่สงสัยว่าสูญเปล่า
• เหมาะกับธุรกิจที่งบใหญ่พอและสงสัยแคมเปญยิงซ้ำลูกค้าเก่า มากกว่าธุรกิจเล็กที่เพิ่งเริ่มยิงแอด

คำถามที่พบบ่อย