← กลับไปหน้าบทความ
ขั้นสูง (MarTech)

แคมเปญนี้ยอดขายพุ่งพรวดแต่ทีมไม่แน่ใจว่าเพราะแอดหรือเพราะโปรโมชันคู่กัน จะแยกยังไง

ทีมบรรณาธิการ linli12 ส.ค. 04:53อัปเดต 12 ส.ค. 04:53อ่าน 2 นาที
แคมเปญนี้ยอดขายพุ่งพรวดแต่ทีมไม่แน่ใจว่าเพราะแอดหรือเพราะโปรโมชันคู่กัน จะแยกยังไง
บทความนี้จัดทำเพื่อความรู้ ชื่อธุรกิจ ตัวเลข หรือบทสนทนาที่ไม่มีแหล่งอ้างอิงกำกับเป็นกรณีตัวอย่างเพื่ออธิบายแนวคิด ดูรายละเอียดที่ นโยบายกองบรรณาธิการ

สรุปสั้น ๆ

Conversion Lift คือการวัดผลต่างของยอดขายระหว่างกลุ่มที่เห็นโฆษณากับกลุ่มควบคุมที่ไม่เห็น มักเป็นฟีเจอร์เฉพาะที่แพลตฟอร์มโฆษณาอย่าง Google Ads หรือ Meta เปิดให้ใช้ในบัญชีที่มีเงื่อนไขงบและกลุ่มเป้าหมายมากพอ ต่างจาก Conversion Attribution ทั่วไปที่นับยอดขายทุกรายการที่เชื่อมโยงกับคลิกหรือการเห็นโฆษณา โดยไม่แยกว่ายอดขายนั้นจะเกิดขึ้นอยู่แล้วหรือไม่ก็ตาม เมื่อมีโปรโมชันคู่ขนานเกิดขึ้นพร้อมกัน Conversion Lift Study ที่ออกแบบมาอย่างถูกต้องจะช่วยแยกผลของโฆษณาออกจากผลของโปรโมชันได้ชัดเจนกว่าการดู Conversion รวมเฉย ๆ

ทีมมาร์เก็ตติ้งของร้านเครื่องใช้ไฟฟ้าแห่งหนึ่งเจอสถานการณ์ที่ยอดขายจากแคมเปญ LINE พุ่งขึ้นเกือบสองเท่าในสัปดาห์เดียว ตอนแรกทุกคนดีใจคิดว่าแคมเปญโฆษณาชุดใหม่ทำงานได้ผลดีมาก แต่พอย้อนดูปฏิทินกิจกรรมการตลาดถึงพบว่าสัปดาห์นั้นเป็นสัปดาห์เดียวกับที่ร้านจัดโปรโมชันลดราคา 20% พอดี ทำให้เกิดคำถามที่ตอบยากขึ้นมาทันทีว่ายอดขายที่พุ่งขึ้นนั้นเป็นผลจากโฆษณา จากโปรโมชัน หรือจากทั้งสองอย่างรวมกันในสัดส่วนเท่าไหร่

คำถามแบบนี้ตอบไม่ได้ด้วยการดูตัวเลข Conversion ที่ระบบโฆษณารายงานเพียงอย่างเดียว เพราะ Conversion ที่นับได้จะรวมยอดขายทั้งหมดที่เกิดขึ้นหลังจากมีคนเห็นหรือคลิกโฆษณาในช่วงเวลานั้น โดยไม่ได้แยกว่าลูกค้าคนไหนซื้อเพราะเห็นโฆษณา คนไหนซื้อเพราะเห็นราคาลด หรือซื้อเพราะทั้งสองอย่างพร้อมกัน การจะแยกผลสองเรื่องนี้ออกจากกันต้องอาศัยแนวคิดที่เรียกว่า Conversion Lift

บทความนี้จะอธิบายว่า Conversion Lift คืออะไร ทำงานยังไงในทางปฏิบัติ มีเงื่อนไขอะไรก่อนใช้ได้จริง และในสถานการณ์แบบยอดขายพุ่งพร้อมกับมีโปรโมชันคู่ขนาน มีแนวทางไหนที่ช่วยแยกผลได้บ้างแม้จะไม่มี Lift Study เต็มรูปแบบ

ทำไมเหตุการณ์ที่เกิดพร้อมกันถึงทำให้แยกผลยาก

ปัญหานี้เกิดขึ้นบ่อยกว่าที่คิด เพราะธุรกิจส่วนใหญ่มักไม่ได้วางแผนแคมเปญโฆษณาและโปรโมชันแยกจากกันโดยสิ้นเชิง หลายครั้งทีมจงใจจัดให้ตรงกันเพราะอยากให้ได้ผลลัพธ์สูงสุดในช่วงเวลาเดียว เช่น เพิ่มงบโฆษณาพร้อมกับเปิดตัวโปรโมชันใหญ่ ซึ่งเป็นกลยุทธ์ที่สมเหตุสมผลในแง่ธุรกิจ แต่กลับทำให้การวัดผลย้อนหลังว่าอะไรคือตัวขับเคลื่อนหลักทำได้ยากขึ้นมาก

ถ้าไม่มีระบบวัดผลที่แยกปัจจัยออกจากกันได้ ทีมมักจะตัดสินใจแบบเดาสุ่มในรอบถัดไป เช่น ถ้าเชื่อว่าโฆษณาคือตัวขับเคลื่อนหลัก ก็อาจเพิ่มงบโฆษณาต่อโดยไม่จัดโปรโมชัน แล้วพบว่ายอดขายไม่ได้พุ่งเหมือนเดิม หรือถ้าเชื่อว่าโปรโมชันคือตัวขับเคลื่อนหลัก ก็อาจลดงบโฆษณาลงแล้วจัดโปรโมชันอย่างเดียว ซึ่งทั้งสองทางเลือกล้วนเสี่ยงถ้าตัดสินใจจากการเดาแทนที่จะมีข้อมูลรองรับ

Conversion Lift คืออะไรกันแน่

Conversion Lift คือการวัดผลต่างของยอดขายหรือ Conversion ระหว่างกลุ่มที่ได้เห็นโฆษณากับกลุ่มควบคุมที่ไม่ได้เห็นหรือเห็นน้อยกว่าอย่างมีนัยสำคัญ ในช่วงเวลาเดียวกัน โดยพยายามควบคุมปัจจัยอื่นให้ใกล้เคียงกันที่สุดเท่าที่จะทำได้ ผลต่างที่วัดได้คือสิ่งที่เรียกว่า 'Lift' หรือยอดขายที่เพิ่มขึ้นเพราะโฆษณาโดยเฉพาะ ไม่ใช่ยอดขายที่เกิดจากปัจจัยอื่นที่เกิดขึ้นพร้อมกัน

แพลตฟอร์มโฆษณาอย่าง Google Ads และ Meta มีฟีเจอร์ Conversion Lift Study หรือชื่อเรียกที่ใกล้เคียงกันในบัญชีที่มีเงื่อนไขงบและปริมาณ Conversion มากพอ ฟีเจอร์นี้ทำงานโดยแบ่งกลุ่มเป้าหมายภายในแพลตฟอร์มเองเป็นกลุ่มทดลองและกลุ่มควบคุม แล้วรายงานผลต่างของ Conversion ให้ธุรกิจเห็นหลังจบการทดสอบ ธุรกิจไม่ต้องแบ่งกลุ่มเองด้วยมือ แต่ต้องตรวจสอบเงื่อนไขและวิธีตั้งค่าจากเอกสารล่าสุดของแต่ละแพลตฟอร์มก่อนเริ่มใช้งานเสมอ เพราะรายละเอียดอาจเปลี่ยนแปลงได้

เงื่อนไขที่ต้องมีก่อนรัน Conversion Lift Study ได้จริง

Conversion Lift Study ไม่ใช่ฟีเจอร์ที่เปิดใช้ได้ทันทีทุกบัญชี ส่วนใหญ่มีเงื่อนไขขั้นต่ำที่ต้องผ่านก่อน ซึ่งอาจต่างกันไปตามแพลตฟอร์มและช่วงเวลา:

  • งบโฆษณาขั้นต่ำต่อช่วงเวลาที่กำหนด เพื่อให้มีปริมาณข้อมูลมากพอสำหรับวิเคราะห์ผลต่างอย่างมีนัยสำคัญ
  • ปริมาณ Conversion ที่บันทึกได้ในบัญชีต้องมากพอในช่วงเวลาก่อนหน้า ไม่ใช่บัญชีที่เพิ่งเริ่มยิงแอดและมี Conversion น้อยมาก
  • ระยะเวลารันแคมเปญต่อเนื่องตามที่แพลตฟอร์มกำหนด ไม่ใช่แคมเปญที่เปิดปิดถี่ในช่วงเวลาสั้น
  • ขนาดกลุ่มเป้าหมายในตลาดที่ยิงแอดต้องใหญ่พอให้แบ่งกลุ่มทดลองกับกลุ่มควบคุมได้โดยยังมีข้อมูลเพียงพอทั้งสองฝั่ง

ตัวอย่างสมมติ เมื่อมีโปรโมชันคู่กับแอด

ลองกลับไปที่สถานการณ์ร้านเครื่องใช้ไฟฟ้าที่ยอดขายพุ่งพร้อมกับมีโปรโมชันลดราคา 20% ตัวเลขทั้งหมดด้านล่างเป็นตัวอย่างสมมติเพื่อประกอบกรอบวิเคราะห์เท่านั้น สมมติว่าร้านนี้เคยรัน Conversion Lift Study ไว้ล่วงหน้าในช่วงที่ไม่มีโปรโมชัน พบว่ากลุ่มที่เห็นโฆษณามียอดขาย 400 ออเดอร์ต่อสัปดาห์ ส่วนกลุ่มควบคุมมียอดขาย 310 ออเดอร์ต่อสัปดาห์ เท่ากับ Lift จากโฆษณาอย่างเดียวอยู่ที่ประมาณ 90 ออเดอร์

พอถึงสัปดาห์ที่มีทั้งโฆษณาและโปรโมชันพร้อมกัน ยอดขายรวมพุ่งเป็น 620 ออเดอร์ ถ้าเทียบกับสัปดาห์ปกติที่ไม่มีทั้งสองอย่างซึ่งเคยอยู่ที่ 310 ออเดอร์ จะเห็นว่ายอดขายเพิ่มขึ้นทั้งหมด 310 ออเดอร์ ในจำนวนนี้ถ้ารู้ว่า Lift จากโฆษณาอย่างเดียวอยู่ที่ประมาณ 90 ออเดอร์จากการทดสอบครั้งก่อน ส่วนที่เหลืออีกประมาณ 220 ออเดอร์จึงน่าจะเป็นผลจากโปรโมชันหรือผลเสริมกันระหว่างโฆษณากับโปรโมชัน ซึ่งเป็นข้อมูลที่ช่วยให้ทีมตัดสินใจรอบถัดไปได้แม่นยำกว่าการเดาว่าอันไหนคือตัวขับเคลื่อนหลัก

เทียบ Conversion Lift กับวิธีวัดผลอื่นที่ใกล้เคียงกัน

เพื่อให้เห็นภาพว่า Conversion Lift ต่างจากวิธีอื่นตรงไหน ลองดูตารางเปรียบเทียบนี้:

วิธีวัดผลใครเป็นคนแบ่งกลุ่มทดลอง/ควบคุมเหมาะกับคำถามแบบไหน
Conversion Attribution ทั่วไปไม่มีการแบ่งกลุ่ม นับทุก Conversion ที่เชื่อมกับคลิกดูภาพรวมยอดขายรายวันเพื่อปรับแคมเปญเร็ว
Conversion Lift Study (ฟีเจอร์แพลตฟอร์ม)แพลตฟอร์มโฆษณาแบ่งกลุ่มให้อัตโนมัติภายในระบบวัดผลเพิ่มของโฆษณาล้วน ๆ โดยไม่ต้องออกแบบเอง
Holdout Test ที่ธุรกิจออกแบบเองธุรกิจกำหนดกลุ่มทดลองและกลุ่มควบคุมเองต้องการควบคุมเงื่อนไขการทดสอบเองอย่างละเอียด

สิ่งที่ Conversion Lift ยังตอบไม่ได้ครบ

แม้ Conversion Lift Study จะช่วยแยกผลของโฆษณาออกจากปัจจัยอื่นได้ดีกว่าการดู Conversion รวมเฉย ๆ แต่ก็ยังมีข้อจำกัดที่ต้องเข้าใจก่อนนำผลไปใช้ตัดสินใจ

  • ผลจากการทดสอบครั้งก่อนอาจใช้ไม่ได้กับช่วงเวลาที่มีโปรโมชัน — พฤติกรรมลูกค้าตอนมีส่วนลดอาจต่างจากตอนไม่มีส่วนลด การนำ Lift เก่ามาประมาณผลของสัปดาห์ที่มีโปรโมชันจึงเป็นแค่การประมาณ ไม่ใช่ตัวเลขแม่นยำ
  • ไม่ได้บอกว่าผลเสริมกันระหว่างโฆษณากับโปรโมชันมีสัดส่วนเท่าไหร่ — อาจมีลูกค้าบางส่วนที่ซื้อเพราะเห็นทั้งโฆษณาและโปรโมชันพร้อมกัน ซึ่ง Lift Study ทั่วไปไม่ได้ออกแบบมาให้แยกส่วนนี้ออกมาชัดเจน
  • ต้องรันในช่วงเวลาที่ไม่มีปัจจัยรบกวนอื่นถึงจะได้ผลที่สะอาด — ถ้าต้องการวัด Lift ของโฆษณาล้วน ๆ ควรรันการทดสอบในช่วงที่ไม่มีโปรโมชันหรือกิจกรรมพิเศษอื่นเข้ามาปนด้วย

ถ้ายังไม่มี Lift Study เต็มรูปแบบ มีแนวทางไหนช่วยแยกผลได้บ้าง

ธุรกิจขนาดเล็กที่ยังไม่ผ่านเงื่อนไขขั้นต่ำสำหรับ Conversion Lift Study ของแพลตฟอร์ม ยังมีแนวทางเชิงปฏิบัติที่ช่วยแยกผลได้ในระดับหนึ่ง แม้จะไม่แม่นยำเท่าการทดสอบแบบเต็มรูปแบบ วิธีหนึ่งคือหลีกเลี่ยงการจัดโปรโมชันใหญ่พร้อมกับการปรับงบโฆษณาครั้งใหญ่ในรอบเดียวกัน ให้แยกทดสอบทีละตัวแปรในรอบถัดไปแทน เพื่อให้เห็นผลของแต่ละปัจจัยชัดขึ้น

อีกวิธีคือเปรียบเทียบยอดขายของสัปดาห์ที่มีโปรโมชันอย่างเดียวโดยไม่เพิ่มงบโฆษณา กับสัปดาห์ที่มีทั้งโปรโมชันและงบโฆษณาที่เพิ่มขึ้น ถ้าธุรกิจมีข้อมูลย้อนหลังของทั้งสองสถานการณ์ จะพอประมาณผลของโฆษณาได้คร่าว ๆ แม้จะไม่ควบคุมตัวแปรได้แน่นเท่า Lift Study ที่แพลตฟอร์มรันให้ วิธีการอ่านตัวเลขแบบเปรียบเทียบช่วงเวลานี้เกี่ยวข้องกับหลักการเดียวกับที่อธิบายไว้ใน Incrementality Testing ซึ่งเป็นแนวคิดที่ครอบคลุมกว้างกว่า Conversion Lift

การวางแผนโปรโมชันร่วมกับทีมมาร์เก็ตติ้งล่วงหน้าก็ช่วยได้มาก เช่น กำหนดปฏิทินให้บางสัปดาห์มีแค่โปรโมชันไม่มีการปรับงบโฆษณา และบางสัปดาห์ปรับงบโฆษณาโดยไม่มีโปรโมชัน เพื่อสร้างข้อมูลเปรียบเทียบตามธรรมชาติโดยไม่ต้องรอฟีเจอร์ Lift Study อย่างเป็นทางการ แนวทางเรื่องการออกแบบโปรโมชันให้มีจังหวะที่เหมาะสมยังเกี่ยวข้องกับหลักการเร่งการตัดสินใจของลูกค้าที่อธิบายไว้ใน Scarcity และ Urgency ในแคมเปญ LINE ด้วย

ระบบติดตามยอดขายช่วยตรงจุดนี้ยังไงบ้าง

สิ่งที่ทำให้การแยกผลระหว่างโฆษณากับโปรโมชันทำได้แม่นยำขึ้นคือการมีข้อมูลยอดขายที่บันทึกละเอียดพอ เช่น รู้ว่าออเดอร์ไหนใช้โค้ดส่วนลด ออเดอร์ไหนมาจากแคมเปญไหน และเวลาที่แต่ละออเดอร์เกิดขึ้น ระบบอย่าง linli ช่วยจัดระเบียบการบันทึก Order และแหล่งที่มาของแต่ละออเดอร์ผ่าน LINE ทำให้เมื่อต้องย้อนวิเคราะห์ว่าสัปดาห์ไหนมีอะไรเกิดขึ้นบ้าง ทีมมีข้อมูลดิบที่ครบพอจะแยกดูตามช่วงเวลาหรือตามแคมเปญได้ แต่ระบบไม่ได้รัน Conversion Lift Study หรือคำนวณผลต่างระหว่างกลุ่มทดลองกับกลุ่มควบคุมให้อัตโนมัติ ส่วนนั้นยังต้องอาศัยฟีเจอร์เฉพาะของแพลตฟอร์มโฆษณาหรือการออกแบบวิเคราะห์เองของทีม

สรุป

สถานการณ์ยอดขายพุ่งพร้อมกับมีโปรโมชันคู่ขนานเป็นเรื่องปกติที่ธุรกิจเจอบ่อย และ Conversion Lift คือแนวคิดที่ช่วยแยกผลของโฆษณาออกจากปัจจัยอื่นได้แม่นยำกว่าการดู Conversion รวมเฉย ๆ ไม่ว่าจะผ่านฟีเจอร์ Lift Study ของแพลตฟอร์มหรือการเปรียบเทียบข้อมูลย้อนหลังเอง

ถ้าบัญชีโฆษณายังไม่ผ่านเงื่อนไขขั้นต่ำสำหรับ Lift Study เต็มรูปแบบ การวางแผนแยกทดสอบทีละตัวแปรและบันทึกข้อมูลยอดขายให้ละเอียดพอ ก็ยังช่วยให้ทีมประมาณผลของแต่ละปัจจัยได้ในระดับที่ใช้ตัดสินใจได้จริง

  • Conversion Lift วัดผลต่างระหว่างกลุ่มเห็นโฆษณากับกลุ่มควบคุม ต่างจาก Conversion ทั่วไปที่นับรวมทุกยอดขาย
  • มีเงื่อนไขงบและปริมาณ Conversion ขั้นต่ำก่อนใช้ฟีเจอร์นี้ได้ในแต่ละแพลตฟอร์ม
  • เมื่อมีโปรโมชันคู่กับแอด ควรแยกทดสอบทีละตัวแปรในบางรอบเพื่อเห็นผลแต่ละปัจจัยชัดขึ้น
  • ผล Lift จากช่วงเวลาหนึ่งอาจใช้ประมาณช่วงอื่นได้ แต่ไม่ควรถือเป็นตัวเลขแม่นยำตายตัว

คำถามที่พบบ่อย

Conversion Lift ต่างจาก Conversion ที่เห็นใน Ads Manager ทั่วไปยังไง

Conversion ทั่วไปนับยอดขายทุกรายการที่เชื่อมโยงกับคลิกหรือการเห็นโฆษณา โดยไม่แยกว่ายอดขายนั้นจะเกิดขึ้นอยู่แล้วหรือไม่ ส่วน Conversion Lift วัดผลต่างระหว่างกลุ่มที่เห็นโฆษณากับกลุ่มควบคุมที่ไม่เห็น เพื่อประมาณว่ามีสัดส่วนเท่าไหร่ที่เป็นยอดขายเพิ่มขึ้นจริงเพราะโฆษณา

ธุรกิจ SME งบโฆษณาไม่มาก รัน Conversion Lift Study ได้ไหม

ขึ้นกับเงื่อนไขขั้นต่ำของแต่ละแพลตฟอร์มในช่วงเวลานั้น ซึ่งมักกำหนดงบและปริมาณ Conversion ขั้นต่ำไว้ ธุรกิจที่ยังไม่ผ่านเงื่อนไขอาจต้องใช้แนวทางเปรียบเทียบข้อมูลย้อนหลังเองแทนการรอฟีเจอร์นี้

ถ้ามีโปรโมชันกับแอดพร้อมกันตลอด จะรู้ได้ยังไงว่าอันไหนสำคัญกว่า

วิธีที่แม่นยำที่สุดคือแยกทดสอบทีละตัวแปรในบางรอบ เช่น มีโปรโมชันอย่างเดียวไม่ปรับงบโฆษณาในบางสัปดาห์ แล้วเปรียบเทียบกับสัปดาห์ที่มีทั้งสองอย่าง ถ้าไม่เคยแยกทดสอบเลย จะบอกสัดส่วนที่แน่นอนได้ยากมาก

Conversion Lift Study ใช้เวลานานแค่ไหนกว่าจะได้ผล

แตกต่างกันตามแพลตฟอร์มและปริมาณ Conversion ของบัญชี โดยทั่วไปต้องรันต่อเนื่องอย่างน้อยหลายสัปดาห์เพื่อให้มีข้อมูลมากพอ ควรตรวจสอบระยะเวลาที่แนะนำจากเอกสารล่าสุดของแพลตฟอร์มที่ใช้งานอยู่

ผล Lift จากการทดสอบตอนไม่มีโปรโมชัน เอามาใช้ตอนมีโปรโมชันได้ไหม

ใช้เป็นตัวเลขประมาณเบื้องต้นได้ แต่ต้องระวังว่าพฤติกรรมลูกค้าช่วงมีส่วนลดอาจต่างจากช่วงปกติ ผลที่ได้จึงเป็นการประมาณคร่าว ๆ ไม่ใช่ตัวเลขที่แม่นยำเท่าการทดสอบในช่วงเวลาเดียวกันกับที่มีโปรโมชันจริง

ทีมขนาดเล็กที่ไม่มีนักวิเคราะห์ข้อมูล เริ่มเข้าใจเรื่องนี้ยังไงดี

เริ่มจากบันทึกข้อมูลพื้นฐานให้ครบก่อน เช่น วันที่จัดโปรโมชัน วันที่ปรับงบโฆษณา และยอดขายรายวัน แล้วลองเทียบช่วงเวลาที่มีปัจจัยต่างกันด้วยตาเปล่าไปก่อน ก่อนจะขยับไปใช้ฟีเจอร์ Lift Study ของแพลตฟอร์มเมื่อบัญชีผ่านเงื่อนไขขั้นต่ำ

วัด Conversion LINE ทุกแบรนด์ รวมศูนย์ที่เดียว

องค์กรที่มีหลายแบรนด์ หลายสาขา หลาย LINE OA — linli รวม Tracking และส่ง Conversion กลับทุกแพลตฟอร์ม พร้อม Custom Limit เริ่มฟรี 14 วัน

ติดต่อทีม Sales

บทความที่เกี่ยวข้อง

ปิดแอดสักพักแล้วยอดขายยังเท่าเดิม แปลว่าแอดไม่ได้ช่วยอะไรเลยหรือเปล่า

ปิดแอดสักพักแล้วยอดขายยังเท่าเดิม แปลว่าแอดไม่ได้ช่วยอะไรเลยหรือเปล่า

เจ้าของร้านบางคนเคยลองปิดแอดสักสัปดาห์แล้วพบว่ายอดขายไม่ได้ลดฮวบตามที่กลัว คำถามที่ตามมาคือแอดที่จ่ายเงินไปตลอดนี้ช่วยอะไรจริงหรือเปล่า Incrementality Testing คือวิธีตอบคำถามนี้อย่างเป็นระบบ ไม่ใช่แค่ลองปิดดูเฉย ๆ
ทีมขายปิดออเดอร์ทุกวัน แต่ผู้บริหารยังไม่รู้ว่างบโฆษณาก้อนไหนสร้างยอดจริง

ทีมขายปิดออเดอร์ทุกวัน แต่ผู้บริหารยังไม่รู้ว่างบโฆษณาก้อนไหนสร้างยอดจริง

Marketing Mix Modeling มองภาพรวมระยะยาวจากยอดขายทุกช่องทาง ส่วน Attribution ไล่ตาม Journey รายบุคคล สองเครื่องมือนี้ไม่ได้แข่งกัน แต่ทีมที่ขายผ่าน LINE ต้องรู้ว่าเมื่อไรควรใช้ตัวไหนเป็นหลัก
งบโฆษณาเดือนละแสนกว่าบาท แต่ไม่มีใครในทีมตอบได้ว่าถ้าหยุดยิงยอดขายจะลดจริงไหม

งบโฆษณาเดือนละแสนกว่าบาท แต่ไม่มีใครในทีมตอบได้ว่าถ้าหยุดยิงยอดขายจะลดจริงไหม

หลายธุรกิจใช้งบโฆษณาต่อเนื่องทุกเดือนโดยไม่เคยพิสูจน์ว่าถ้าหยุดยิงจริง ยอดขายจะลดลงมากน้อยแค่ไหน Holdout Test คือวิธีออกแบบการทดลองที่กันกลุ่มเป้าหมายบางส่วนไม่ให้เห็นโฆษณา แล้วเทียบผลลัพธ์อย่างเป็นระบบ แทนที่จะเดาจากความรู้สึก