แอดมินที่ตอบไวปิดยอดสูงกว่าจริง แต่ ‘ตอบไว’ คือสาเหตุ หรือแค่บังเอิญเกิดพร้อมกัน

สรุปสั้น ๆ
ตัวเลขสองชุดที่ขยับไปด้วยกันไม่ได้แปลว่าอันหนึ่งเป็นสาเหตุของอีกอันเสมอไป อาจมีตัวแปรแฝงที่ทำให้ทั้งคู่ขยับพร้อมกัน การแยกสหสัมพันธ์ออกจากเหตุและผลให้ถูก ช่วยไม่ให้ทุ่มทรัพยากรผิดจุดจากการตีความข้อมูลแชทผิด
คลินิก ‘GlowUp ความงาม’ ทำรายงานเทียบแอดมินสองคน พบว่าแอดมินที่ตอบแชทภายใน 2 นาที ปิดยอดได้ 42% ในขณะที่แอดมินที่ตอบช้ากว่า 10 นาที ปิดยอดได้แค่ 18% ผู้จัดการรีบสรุปว่า ‘ตอบไวคือกุญแจสำคัญ’ แล้วออกกฎบังคับให้ทุกคนต้องตอบภายใน 2 นาทีเป๊ะ
แต่พอลองขุดลึกลงไป พบว่าแอดมินที่ตอบไวมักถูกมอบหมายให้ดูแลลูกค้าจากแคมเปญ ‘คนที่กดสนใจโปรโมชันเฉพาะกิจ’ ซึ่งเป็นกลุ่มที่ตัดสินใจซื้ออยู่แล้วเป็นทุนเดิม ส่วนแอดมินที่ตอบช้ากว่ามักต้องดูแลลูกค้าจากแคมเปญ ‘ถามข้อมูลทั่วไป’ ที่ยังลังเลอยู่มาก
พูดอีกแบบคือ ‘ความเร็วในการตอบ’ กับ ‘อัตราปิดการขาย’ ขยับไปด้วยกันจริง แต่ตัวที่ทำให้ทั้งสองขยับพร้อมกันอาจไม่ใช่ความเร็วเป็นสาเหตุโดยตรง แต่เป็นตัวแปรแฝงอย่าง ‘ประเภทลูกค้าที่ได้รับมอบหมาย’ ต่างหาก นี่คือกับดักคลาสสิกของการสับสนระหว่างสหสัมพันธ์กับเหตุและผล
สหสัมพันธ์ (Correlation) ต่างจากเหตุและผล (Causation) ยังไง
สหสัมพันธ์แปลว่าตัวเลขสองชุดขยับไปในทิศทางเดียวกันหรือสวนทางกันอย่างสม่ำเสมอ แต่ไม่ได้บอกว่าอันไหนเป็นสาเหตุของอันไหน ส่วนเหตุและผลคือการยืนยันได้ว่าถ้าเปลี่ยนตัวแปรหนึ่ง อีกตัวแปรจะเปลี่ยนตามจริงๆ
ตัวอย่างคลาสสิกที่มักยกกันคือ ยอดขายไอศกรีมกับจำนวนคนจมน้ำ ขยับขึ้นลงพร้อมกันตามฤดูกาล แต่ไอศกรีมไม่ได้ทำให้คนจมน้ำ ตัวแปรแฝงคือ ‘อากาศร้อน’ ที่ทำให้ทั้งสองอย่างเพิ่มขึ้นพร้อมกันต่างหาก
ตัวแปรแฝงที่ซ่อนอยู่ในกรณีคลินิก GlowUp
| ตัวแปร | แอดมิน A (ตอบไว) | แอดมิน B (ตอบช้า) |
|---|---|---|
| ความเร็วตอบแชทเฉลี่ย | 2 นาที | 10 นาที |
| อัตราปิดการขาย | 42% | 18% |
| ประเภทลูกค้าที่ดูแล | กดสนใจโปรโมชันเฉพาะกิจ (ตั้งใจซื้ออยู่แล้ว) | ถามข้อมูลทั่วไป (ยังลังเล) |
ถ้าอยากรู้ว่าตอบไวเป็นสาเหตุจริงไหม ต้องทำยังไง
วิธีที่แม่นที่สุดคือทดสอบแบบควบคุมตัวแปร เช่น ให้แอดมินสองคนสลับกันดูแลลูกค้าประเภทเดียวกันในช่วงเวลาเดียวกัน แล้ววัดว่าความเร็วในการตอบยังส่งผลต่ออัตราปิดหรือไม่ เมื่อตัดตัวแปรเรื่องประเภทลูกค้าออกไปแล้ว ใกล้เคียงกับหลักการของ holdout test ที่เคยพูดถึง ที่ใช้กลุ่มควบคุมเพื่อแยกผลจริงออกจากปัจจัยแวดล้อม
ถ้าทำแบบนี้ไม่ได้เพราะข้อจำกัดเรื่องกำลังคน อย่างน้อยควรแบ่งข้อมูลตามประเภทลูกค้าก่อนเปรียบเทียบความเร็วในการตอบ แทนที่จะเทียบรวมทุกประเภทเข้าด้วยกันแล้วสรุปมั่ว
กับดักแบบเดียวกันที่พบบ่อยในข้อมูลแชท
- แคมเปญที่มี ‘ข้อความยาว’ ปิดยอดสูงกว่า อาจไม่ใช่เพราะข้อความยาวดีกว่า แต่เพราะแอดมินใช้ข้อความยาวกับลูกค้าที่ถามคำถามลึกอยู่แล้ว ซึ่งเป็นสัญญาณว่าเขาสนใจจริงจังตั้งแต่ต้น
- ช่วงเวลาที่ ‘ตอบดึก’ แล้วปิดยอดสูง อาจไม่ใช่เพราะตอบดึกดีกว่า แต่เพราะลูกค้าที่ทักดึกมักเป็นคนที่คิดมาแล้วรอบหนึ่งก่อนตัดสินใจทัก จึงพร้อมซื้อมากกว่าคนที่ทักฉับพลันตอนกลางวัน
- แคมเปญที่ ‘ราคาสูงกว่า’ ดูเหมือนปิดยอดต่อคนได้มากกว่า อาจไม่ใช่เพราะราคาสูงทำให้ปิดง่ายขึ้น แต่เพราะกลุ่มเป้าหมายของแคมเปญนั้นเป็นคนที่มีกำลังซื้อสูงอยู่แล้วตั้งแต่การตั้งค่ายิงแอด
ก่อนสรุปว่าอะไรเป็นสาเหตุ ให้ถามคำถามนี้ก่อน
- ถามว่ามีตัวแปรอื่นที่อาจทำให้ทั้งสองสิ่งขยับพร้อมกันได้ไหม โดยไม่ต้องมีความสัมพันธ์เชิงเหตุผลจริงระหว่างกัน
- ลองแบ่งข้อมูลตามกลุ่มย่อยที่น่าจะเป็นตัวแปรแฝง แล้วดูว่าความสัมพันธ์ที่เห็นยังคงอยู่ในทุกกลุ่มย่อยหรือไม่
- ถ้าเป็นไปได้ ออกแบบการทดสอบที่ควบคุมตัวแปรอื่นให้คงที่ แล้วเปลี่ยนแค่ตัวแปรที่สงสัยว่าเป็นสาเหตุทีละตัว
- ถ้าทำการทดสอบควบคุมไม่ได้จริงๆ ให้ยอมรับว่าข้อสรุปเป็นแค่สมมติฐาน ไม่ใช่ข้อเท็จจริงที่ยืนยันแล้ว
สรุป
ตัวเลขสองชุดที่ขยับไปด้วยกันเป็นแค่จุดเริ่มต้นของคำถาม ไม่ใช่คำตอบสุดท้าย ก่อนทุ่มทรัพยากรไปกับสิ่งที่ ‘ดูเหมือน’ เป็นสาเหตุ ควรถามก่อนว่ามีตัวแปรแฝงอื่นที่อธิบายได้ดีกว่าไหม
การแยกสหสัมพันธ์ออกจากเหตุและผลไม่ใช่เรื่องวิชาการไกลตัว แต่เป็นนิสัยการอ่านข้อมูลที่ป้องกันการตัดสินใจผิดพลาดราคาแพงได้จริงในธุรกิจที่พึ่งพาข้อมูลแชทเป็นหลัก
- ตัวเลขสองชุดที่ขยับไปด้วยกัน ไม่ได้แปลว่าอันหนึ่งเป็นสาเหตุของอีกอันเสมอไป
- ตัวแปรแฝงมักเป็นตัวการที่ทำให้ตัวเลขสองชุดขยับพร้อมกันโดยไม่มีความสัมพันธ์เชิงเหตุผลจริง
- ก่อนสรุปว่าอะไรเป็นสาเหตุ ให้ลองแบ่งกลุ่มย่อยหรือทดสอบควบคุมตัวแปรก่อนเชื่อเต็มร้อย
คำถามที่พบบ่อย
แล้วต้องเลิกดูตัวเลขสหสัมพันธ์ไปเลยไหม
ไม่ต้องเลิก สหสัมพันธ์ยังมีประโยชน์ในการตั้งสมมติฐานเบื้องต้นว่าอะไรน่าจะเกี่ยวข้องกัน เพียงแต่ไม่ควรหยุดแค่นั้นแล้วสรุปเป็นเหตุและผลทันที
ตัวแปรแฝงหาได้ยากไหม
บางครั้งง่าย บางครั้งซ่อนลึก วิธีที่ช่วยได้คือลองนึกถึงปัจจัยอื่นที่อาจส่งผลต่อทั้งสองตัวแปรพร้อมกัน แล้วเช็กว่ามันสมเหตุสมผลไหมก่อนตัดออก
ธุรกิจเล็กที่ไม่มีเวลาทำทดสอบควบคุมตัวแปร ควรทำยังไง
อย่างน้อยลองแบ่งข้อมูลตามกลุ่มลูกค้าก่อนเปรียบเทียบ แทนที่จะเทียบรวมทุกกลุ่มเข้าด้วยกัน วิธีนี้หยาบกว่าการทดสอบเต็มรูปแบบแต่ช่วยลดโอกาสสรุปผิดได้เยอะ
เคยได้ยินว่าสหสัมพันธ์สูงมากๆ ก็ยังไม่ใช่เหตุและผลได้ ทำไม
เพราะแม้ตัวเลขจะขยับตรงกันแทบทุกครั้ง ก็ยังอาจมีตัวแปรแฝงตัวเดียวที่ทำให้ทั้งคู่ขยับพร้อมกันเสมอ ความสม่ำเสมอของตัวเลขไม่ได้พิสูจน์ทิศทางของเหตุและผล ต้องอาศัยการทดสอบควบคุมตัวแปรเพิ่มถึงจะยืนยันได้
กรณีคลินิก GlowUp ควรแก้ปัญหายังไงต่อ
ควรลองให้แอดมินทั้งสองคนสลับดูแลลูกค้าประเภทเดียวกันสักช่วงหนึ่ง แล้ววัดอัตราปิดใหม่ ถ้าความเร็วในการตอบยังส่งผลต่ออัตราปิดชัดเจนแม้ควบคุมประเภทลูกค้าแล้ว ค่อยเชื่อว่าตอบไวเป็นสาเหตุจริง
มีระบบที่ช่วยเก็บข้อมูลแยกตามที่มาของลูกค้าให้อัตโนมัติไหม
มี ระบบอย่างlinliที่บันทึกที่มาของแคมเปญและผลปิดการขายของแต่ละแชทไว้ตั้งแต่ต้น ช่วยให้แบ่งกลุ่มย่อยเพื่อหาตัวแปรแฝงได้ง่ายขึ้น แทนที่จะต้องไล่เดาเอาทีหลัง
บทความที่เกี่ยวข้อง


