Geo-Lift Test สำหรับ SME ไทย: วัด Incrementality โดยไม่ต้องมีทีมข้อมูลใหญ่

สรุปสั้น ๆ
Geo-lift test คือการปิดโฆษณาในบางจังหวัด (control) แล้วเปิดตามปกติในจังหวัดอื่น (test) จากนั้นเทียบยอดขายที่เข้ามาทาง LINE OA ระหว่างสองกลุ่ม ส่วนต่างที่เหลือหลังหักปัจจัยอื่นคือ incrementality โดยประมาณของโฆษณา ไม่ต้องพึ่งความแม่นยำของ pixel หรือ attribution window เลย
ร้านที่ขายผ่าน LINE OA แล้วมีลูกค้าอยู่หลายจังหวัดมักเจอคำถามเดียวกันว่า งบโฆษณาที่ยิงอยู่ทุกวันนี้ ถ้าปิดไปเลยยอดขายจะหายไปเท่าไหร่ คำถามนี้ attribution แบบ last-click ตอบไม่ได้ตรง ๆ เพราะนับเฉพาะคนที่คลิกก่อนทัก แต่ไม่ได้บอกว่าถ้าไม่มีโฆษณาเลยคนกลุ่มนี้จะทักมาซื้อเองอยู่ดีหรือไม่ ยิ่งร้านที่โตมาจากฐานลูกค้าประจำอยู่แล้ว คำถามนี้ยิ่งสำคัญเพราะงบที่เพิ่มเข้าไปอาจไม่ได้สร้างยอดขายใหม่เลยก็เป็นได้
Geo-lift test แก้ปัญหานี้ด้วยวิธีที่ตรงไปตรงมา คือแบ่งพื้นที่ขายออกเป็นสองกลุ่มที่มีพฤติกรรมใกล้เคียงกัน กลุ่มหนึ่งปิดโฆษณาชั่วคราวเป็น control อีกกลุ่มเปิดตามปกติเป็น test แล้ววัดยอดขายจริงที่เข้ามาทาง LINE OA ของทั้งสองกลุ่มในช่วงเวลาเดียวกัน ส่วนต่างที่เกิดขึ้นคือผลของโฆษณาที่ประมาณได้ใกล้เคียงความจริงมากกว่าตัวเลขจาก attribution model วิธีนี้ไม่ต้องพึ่งความแม่นยำของ pixel หรือการตั้งค่า tracking ใด ๆ เลย เพราะวัดจากยอดขายจริงที่เกิดขึ้นในโลกความเป็นจริงโดยตรง
บทความนี้จะพาไล่ตั้งแต่การเลือกพื้นที่ทดสอบ การกำหนดขนาดตัวอย่างที่พอเชื่อถือได้ วิธีอ่านผลตอนยอดขายในสองกลุ่มไม่ต่างกันชัดเจน ไปจนถึงข้อจำกัดที่ SME ไทยต้องรู้ก่อนเริ่มทดสอบจริง เพื่อไม่ให้เสียเวลาทดสอบแล้วได้ผลที่ตีความไม่ได้ รวมถึงตัวอย่างวิธีนำผลไปใช้จัดงบต่อพื้นที่อย่างเป็นระบบมากกว่าการเดาจากความรู้สึก
ทำไม pixel และ attribution model วัด incrementality ไม่ได้ตรง
Pixel และ conversion API บอกได้แค่ว่าใครเคยเห็นหรือคลิกโฆษณาก่อนทักไลน์ แต่ไม่ได้บอกว่าคนคนนั้นจะซื้ออยู่ดีไหมถ้าไม่มีโฆษณาเลย ร้านขายของใช้ในบ้านที่มีลูกค้าประจำอยู่แล้วมักเจอปัญหานี้ชัด เพราะลูกค้าประจำเห็นโฆษณาแล้วคลิกทักไลน์ แต่ต่อให้ไม่มีโฆษณาก็อาจทักมาซื้อซ้ำอยู่ดี ระบบ attribution จะนับยอดนี้เป็นผลจากโฆษณาทั้งหมด ทั้งที่ incrementality จริงอาจต่ำกว่ามาก
ยิ่งธุรกิจที่ปิดการขายในแชทเป็นหลัก ช่องว่างระหว่างคลิกกับทักมักมีขั้นตอนเพิ่ม เช่น เพื่อนแนะนำ หรือค้นหาชื่อร้านใน LINE โดยตรง ซึ่งจะไม่ถูกนับเป็น attribution จากแอด ทำให้ตัวเลขที่เห็นในแดชบอร์ดมีทั้งส่วนที่นับเกิน (over-count คนที่จะซื้ออยู่แล้ว) และนับขาด (under-count คนที่มาจากแอดแต่ทักผ่านช่องทางอื่น) พร้อมกันในเวลาเดียว การอ่าน ROAS จากตัวเลขเดียวโดยไม่มี geo-lift มายืนยันจึงเสี่ยงตัดสินใจผิดทิศ
เลือกพื้นที่ test และ control อย่างไรให้เทียบกันได้จริง
หัวใจของ geo-lift คือสองกลุ่มต้องมีพฤติกรรมพื้นฐานใกล้เคียงกันก่อนเริ่มทดสอบ ไม่ใช่แค่จำนวนประชากรใกล้กัน แต่ต้องดูยอดขายย้อนหลัง 8-12 สัปดาห์ของแต่ละจังหวัดหรือแต่ละกลุ่มพื้นที่ที่ยิงแอดแยกกันได้ก่อน ถ้าจังหวัด A กับ B มีเทรนด์ยอดขายขึ้นลงคล้ายกันในอดีต มีโอกาสสูงที่จะตอบสนองต่อการปิด/เปิดโฆษณาในทิศทางเดียวกัน ใช้ค่านี้เป็นเกณฑ์จับคู่แทนการเดาจากขนาดตลาด
ร้านที่ยิงแอดทั่วประเทศและไม่เคยแยกพื้นที่มาก่อน แนะนำเริ่มจากจับคู่จังหวัดที่มีร้านสาขาหรือมีทีมแอดมินตอบแชทลักษณะเดียวกัน เพื่อตัดปัจจัยเรื่องความเร็วตอบแชทออกจากสมการ เพราะถ้ากลุ่ม control ตอบช้ากว่ากลุ่ม test อยู่แล้ว ผลต่างที่วัดได้จะปนกันระหว่างผลของโฆษณากับผลของคุณภาพแอดมิน ทำให้สรุปผิดว่าโฆษณาคือปัจจัยเดียว
- จับคู่พื้นที่จากยอดขายย้อนหลังที่มีเทรนด์คล้ายกัน ไม่ใช่แค่ขนาดประชากร
- แยกปัจจัยความเร็วตอบแชทออกก่อน ให้สองกลุ่มมีคุณภาพแอดมินใกล้เคียงกัน
- หลีกเลี่ยงพื้นที่ที่มีแคมเปญออฟไลน์คู่ขนาน เช่น บูธหรือป้ายโฆษณาเฉพาะจังหวัด
ทดสอบนานแค่ไหนและต้องมียอดขายกี่เคสถึงจะเชื่อผลได้
ธุรกิจที่ยอดขายต่อวันน้อย เช่น เฉลี่ย 5-10 ออเดอร์ต่อวันต่อพื้นที่ ควรทดสอบอย่างน้อย 3-4 สัปดาห์เพื่อให้มีจำนวนเคสสะสมพอดูแนวโน้มได้ ถ้าทดสอบสั้นกว่านั้นความผันผวนรายวัน เช่น วันเงินเดือนออกหรือช่วงมีโปรโมชันคู่แข่ง จะทำให้ผลต่างที่เห็นดูเหมือนมาจากโฆษณาทั้งที่จริงเป็นสัญญาณรบกวน
แนวทางที่ใช้ได้จริงกับ SME คือดูค่า statistical significance แบบง่ายด้วยการเทียบส่วนเบี่ยงเบนของยอดขายรายสัปดาห์ในอดีตของทั้งสองพื้นที่ก่อน ถ้าค่าความผันผวนสูงอยู่แล้วในภาวะปกติ ต้องยืดระยะทดสอบให้นานขึ้นเพื่อให้สัญญาณจากโฆษณาชัดกว่าสัญญาณรบกวน ไม่มีตัวเลขตายตัวที่ใช้ได้ทุกร้าน ต้องคำนวณจากฐานข้อมูลของร้านตัวเองเสมอ
อ่านผลทดสอบอย่างไรเมื่อยอดขายสองกลุ่มต่างกันไม่ชัด
กรณีที่พบบ่อยที่สุดในการทดสอบจริงคือยอดขายกลุ่ม test กับ control ต่างกันไม่ชัดเจน ซึ่งไม่ได้แปลว่าโฆษณาไม่มีผลเสมอไป อาจแปลว่าตลาดในพื้นที่นั้นอิ่มตัวแล้ว ลูกค้าเก่ารู้จักร้านดีอยู่แล้วจนโฆษณาเพิ่มไม่ได้ช่วยดันยอดเพิ่มมากนัก ตารางด้านล่างสรุปวิธีตีความผลตามระดับส่วนต่างที่พบ เป็นกรอบอ่านผลแบบคร่าว ไม่ใช่สูตรตายตัว ต้องดูบริบทร้านประกอบเสมอ
| ส่วนต่างยอดขาย test vs control | ความหมายที่เป็นไปได้ | สิ่งที่ควรทำต่อ |
|---|---|---|
| สูงกว่า 15-20% ขึ้นไป | โฆษณามี incrementality ชัดเจนในพื้นที่นี้ | ขยายงบในพื้นที่ลักษณะเดียวกัน |
| ประมาณ 5-15% | มีผลบวกแต่ไม่มาก อาจเป็นตลาดกึ่งอิ่มตัว | ทดสอบซ้ำอีกรอบก่อนตัดสินใจงบใหญ่ |
| ต่ำกว่า 5% หรือไม่ต่างกัน | อาจเป็นตลาดอิ่มตัวหรือช่วงเวลาทดสอบสั้นไป | ยืดระยะทดสอบ หรือทดสอบพื้นที่ใหม่ที่ต่างจากเดิม |
ข้อผิดพลาดที่ทำให้ผล geo-lift ใช้ตัดสินใจไม่ได้
ข้อผิดพลาดอันดับต้น ๆ คือปิดโฆษณาในพื้นที่ control แต่ลืมปิดโปรโมชันหรือแคมเปญ broadcast ใน LINE OA ที่ยังส่งถึงลูกค้าพื้นที่นั้นอยู่ ทำให้ผลบวกจากโปรโมชันไปปนกับผลลบจากการปิดแอด สุดท้ายวัดไม่ได้ว่าอะไรทำให้ยอดเปลี่ยน อีกจุดที่พลาดบ่อยคือเปลี่ยนราคาสินค้าหรือรอบสต๊อกในช่วงทดสอบพอดี ซึ่งเป็นตัวแปรแทรกที่ทำให้ผลทั้งชุดใช้ไม่ได้
อีกความผิดพลาดที่ SME มักเจอคือทดสอบครั้งเดียวแล้วตัดสินใจงบก้อนใหญ่ทันที ทั้งที่ผลจาก geo-lift ควรใช้เป็นสัญญาณประกอบ ไม่ใช่คำตอบสุดท้าย โดยเฉพาะร้านที่มีฤดูกาลขายชัด ผลทดสอบในเดือนหนึ่งอาจไม่สะท้อนพฤติกรรมทั้งปี การทดสอบซ้ำในช่วงเวลาต่างกันจะช่วยยืนยันว่าผลที่ได้ไม่ใช่ความบังเอิญของช่วงนั้น
เมื่อไหร่ที่ SME ไม่ควรเสียเวลาทำ geo-lift test
ร้านที่ขายเฉพาะในกรุงเทพฯ หรือพื้นที่เดียวไม่มีทางแบ่ง test/control ตามภูมิศาสตร์ได้ ในกรณีนี้ควรพิจารณาวิธี holdout test design แบบอื่นแทน เช่น สุ่มกลุ่มลูกค้าจากรายชื่อ CRM แทนการแบ่งตามพื้นที่ ซึ่งให้ผลลัพธ์ในทิศทางเดียวกันแต่ใช้กลไกต่างกัน
ร้านที่มีงบโฆษณาต่อเดือนต่ำมาก เช่น ไม่ถึงหลักหมื่นบาท มักไม่คุ้มที่จะเสียงบครึ่งหนึ่งไปกับพื้นที่ control เพราะผลกระทบต่อยอดขายรวมจะสูงเทียบกับสิ่งที่จะได้เรียนรู้ ในกรณีนี้การดู sample size test ก่อนเริ่มจะช่วยประเมินได้ว่าคุ้มค่าจะทดสอบไหมก่อนเสียงบจริง
นำผล geo-lift ไปใช้ตัดสินใจงบต่อจังหวัดอย่างไร
เมื่อได้ผลทดสอบที่พอเชื่อถือได้แล้ว ขั้นต่อไปคือจัดกลุ่มจังหวัดตามระดับ incrementality ที่วัดได้ ไม่ใช่ตาม ROAS ที่ dashboard โฆษณารายงาน เพราะสองค่านี้อาจสวนทางกันได้ พื้นที่ที่ ROAS สูงในรายงานแต่ incrementality ต่ำ หมายความว่าโฆษณากำลังไปจับลูกค้าที่จะซื้ออยู่แล้ว การเพิ่มงบในพื้นที่นั้นอาจไม่ได้ยอดขายเพิ่มขึ้นจริงตามสัดส่วน
แนวทางที่ใช้ได้จริงคือทำ geo-lift รอบใหม่ทุก 2-3 เดือนในพื้นที่หลัก และหมุนเวียนไปทดสอบพื้นที่รองที่ยังไม่เคยวัด incrementality เพื่อสร้างแผนที่ความคุ้มค่างบโฆษณาทั้งประเทศแบบค่อยเป็นค่อยไป แทนที่จะพึ่งตัวเลข ROAS จากแพลตฟอร์มเพียงอย่างเดียวซึ่งไม่แยกแยะผลที่เกิดจริงจากผลที่นับซ้ำ
สื่อสารผลการทดสอบกับทีมขายและแอดมินให้เข้าใจตรงกัน
การทำ geo-lift test มักต้องขอความร่วมมือจากทีมขายหรือแอดมินในพื้นที่ control ให้เข้าใจว่าทำไมโฆษณาถึงถูกปิดชั่วคราว เพราะถ้าทีมในพื้นที่นั้นไม่เข้าใจเหตุผล อาจพยายามหาทางชดเชยด้วยวิธีอื่น เช่น เพิ่มโปรโมชันเองหรือทักหาลูกค้าเก่าเพิ่มขึ้น ซึ่งจะกลายเป็นตัวแปรแทรกที่ทำให้ผลทดสอบเพี้ยนไปโดยไม่ตั้งใจ
ควรอธิบายล่วงหน้าให้ชัดว่าการทดสอบนี้เป็นการลงทุนระยะสั้นเพื่อให้ได้ข้อมูลที่ใช้ตัดสินใจงบระยะยาว และควรกำหนดวันที่ทดสอบจะสิ้นสุดให้ชัดเจน เพื่อไม่ให้ทีมในพื้นที่ control รู้สึกว่าโดนลดความสำคัญอย่างไม่มีกำหนด
บันทึกผลทดสอบไว้ใช้อ้างอิงรอบถัดไป
ธุรกิจที่ทำ geo-lift test ต่อเนื่องหลายรอบควรมีที่บันทึกผลแต่ละรอบไว้เป็นระบบ ทั้งช่วงเวลาที่ทดสอบ พื้นที่ที่ใช้ ขนาดงบ และผลต่างที่วัดได้ เพื่อให้เห็นภาพรวมว่าพื้นที่ไหนมี incrementality สูงหรือต่ำอย่างสม่ำเสมอ ไม่ใช่แค่ครั้งเดียวแล้วลืม
การมีประวัติผลทดสอบสะสมยังช่วยให้ทีมใหม่ที่เข้ามาดูแลงบในอนาคตเข้าใจบริบทได้เร็วขึ้น แทนที่จะต้องเริ่มทดสอบใหม่ตั้งแต่ต้นทุกครั้งที่มีการเปลี่ยนคนดูแล ซึ่งเป็นการสูญเสียองค์ความรู้ที่สะสมมาโดยไม่จำเป็น
สรุป
Geo-lift test ไม่ได้แทนที่ attribution model แต่เป็นเครื่องมือตรวจสอบว่าตัวเลข ROAS ที่เห็นในแดชบอร์ดสะท้อนผลจริงแค่ไหน ธุรกิจที่ขายหลายพื้นที่ผ่าน LINE OA ควรมองว่านี่คือการลงทุนเวลาหนึ่งครั้งเพื่อได้กรอบตัดสินใจงบที่แม่นกว่าการไล่ตามตัวเลขรายวัน และเป็นเครื่องมือที่ทำซ้ำได้เรื่อย ๆ เมื่อธุรกิจขยายไปพื้นที่ใหม่
จุดที่สำคัญที่สุดคือความมีวินัยในการควบคุมตัวแปรอื่นระหว่างทดสอบ ตั้งแต่โปรโมชัน ราคาสินค้า ไปจนถึงคุณภาพการตอบแชท เพราะถ้าตัวแปรเหล่านี้แทรกเข้ามา ผลที่ได้จะกลายเป็นตัวเลขที่ดูน่าเชื่อแต่ตีความผิดทิศทางได้ง่าย การสื่อสารกับทีมงานในพื้นที่ทดสอบให้เข้าใจตรงกันตั้งแต่ต้นจึงสำคัญไม่แพ้การออกแบบการทดสอบเอง
- จับคู่พื้นที่ test-control จากเทรนด์ยอดขายย้อนหลัง ไม่ใช่ขนาดตลาด
- ทดสอบให้นานพอตามความผันผวนยอดขายปกติของร้าน
- ควบคุมตัวแปรแทรก เช่น โปรโมชันและราคา ให้เหมือนกันทั้งสองกลุ่ม
- ใช้ incrementality จัดลำดับงบต่อพื้นที่ แทนการดู ROAS จากแดชบอร์ดอย่างเดียว
คำถามที่พบบ่อย
geo-lift test ต่างจาก A/B test ทั่วไปอย่างไร
A/B test มักสุ่มระดับผู้ใช้หรือครีเอทีฟในพื้นที่เดียวกัน ส่วน geo-lift สุ่มระดับพื้นที่ทางภูมิศาสตร์ทั้งกลุ่ม เหมาะกับกรณีที่วัด incrementality รวมของโฆษณาต่อพื้นที่ ไม่ใช่เทียบครีเอทีฟสองแบบ ทั้งสองวิธีสามารถใช้ประกอบกันได้ในธุรกิจที่ต้องการวัดทั้งสองมิติ
ต้องปิดโฆษณาทั้งหมดในพื้นที่ control หรือปิดแค่บางแคมเปญ
ควรปิดทุกแคมเปญที่เข้าถึงพื้นที่นั้นให้ครบ ถ้าปิดแค่บางแคมเปญแต่ยังมีแคมเปญอื่นทำงานอยู่ ผลที่วัดได้จะสะท้อนแค่ผลของแคมเปญที่ปิด ไม่ใช่ incrementality ของโฆษณาทั้งหมด ควรทำรายการแคมเปญทั้งหมดที่เข้าถึงพื้นที่นั้นไว้ล่วงหน้าก่อนเริ่มทดสอบ
ร้านที่ยิงแอดผ่านหลายแพลตฟอร์มพร้อมกันทำ geo-lift ได้ไหม
ทำได้แต่ต้องปิดทุกแพลตฟอร์มในพื้นที่ control พร้อมกัน ถ้าปิดแค่แพลตฟอร์มเดียวแล้วแพลตฟอร์มอื่นยังยิงอยู่ ผลที่เห็นจะไม่ใช่ incrementality ของโฆษณาโดยรวม อาจต้องใช้เครื่องมือจัดการแคมเปญกลางเพื่อปิดเปิดหลายแพลตฟอร์มพร้อมกันให้ตรงเวลา
ควรทดสอบกี่พื้นที่พร้อมกันถึงจะพอสรุปผลได้
อย่างน้อยควรมีคู่ test-control 2-3 คู่ที่จับคู่กันดี เพื่อลดโอกาสที่ผลจะเพี้ยนจากปัจจัยเฉพาะของพื้นที่ใดพื้นที่หนึ่ง ยิ่งมีคู่ทดสอบมากยิ่งลดความเสี่ยงที่ผลจะเป็นความบังเอิญ แต่ก็ต้องชั่งน้ำหนักกับความซับซ้อนในการจัดการที่เพิ่มขึ้นตามจำนวนคู่ทดสอบ
ผลจาก geo-lift ใช้แทน attribution ในแดชบอร์ดได้เลยไหม
ไม่ควรใช้แทนกันทั้งหมด geo-lift ให้ภาพรวม incrementality ระดับพื้นที่ซึ่งเหมาะกับตัดสินใจงบใหญ่ ส่วน attribution ในแดชบอร์ดยังจำเป็นสำหรับดูประสิทธิภาพรายแคมเปญและรายวัน ควรใช้สองอย่างประกอบกันเพื่อให้เห็นภาพทั้งระยะสั้นและระยะยาว
อ่านต่อแบบเจาะลึก
วัด Conversion LINE ทุกแบรนด์ รวมศูนย์ที่เดียว
องค์กรที่มีหลายแบรนด์ หลายสาขา หลาย LINE OA — linli รวม Tracking และส่ง Conversion กลับทุกแพลตฟอร์ม พร้อม Custom Limit เริ่มฟรี 14 วัน
ติดต่อทีม Salesบทความที่เกี่ยวข้อง

เทียบ Attribution Window 1 วัน 7 วัน 28 วัน: เลือกแบบไหนไม่หลอกตัวเอง

ปรับฐานตามฤดูกาลก่อนอ่านผล: ทำไม ROAS เดือนตุลาคมเทียบกับกุมภาพันธ์ตรง ๆ ไม่ได้
