การวัดความสำเร็จของการใช้งานครั้งแรก: ตัวชี้วัดสำคัญใน Braze

Planning diagram: Measure onboarding beyond the first click. Account created, First value reached, Meaningful return.

ตัวชี้วัดการเริ่มต้นใช้งาน (Onboarding) ใน Braze จะทำงานได้ดีที่สุดเมื่อกำหนดให้การเริ่มต้นใช้งานเป็นชุดของเหตุการณ์สำคัญตามลำดับ ไม่ใช่แค่เพียงอัตราการเปิดอ่านเท่านั้น ให้กำหนดเหตุการณ์สำคัญในการเปิดใช้งาน (Activation) เป็นเหตุการณ์การแปลงผล (Conversion) หลักของคุณ ใช้รายงานแบบกรวย (Funnel Report) เพื่อดูว่าผู้ใช้ใหม่หลุดออกไปในขั้นตอนใด และเปรียบเทียบกับกลุ่มควบคุม ระวังกับดักสองประการ ได้แก่ ผู้ใช้ที่ยังไม่ระบุตัวตนเมื่อเข้ามาในระบบ และการวิเคราะห์ Canvas ที่ใช้กฎวันที่แตกต่างกัน

ประเด็นสำคัญ

  • กำหนดความสำเร็จของการเริ่มต้นใช้งานเป็นชุดของเหตุการณ์สำคัญตามลำดับ ไม่ใช่แค่อัตราการเปิดอ่าน
  • กำหนดให้เหตุการณ์สำคัญในการเปิดใช้งานเป็นเหตุการณ์การแปลงผลหลัก ซึ่งจะมีผลต่อการรายงานมากที่สุด
  • รายงานแบบกรวยจะแสดงให้เห็นว่าผู้ใช้ใหม่หลุดออกไปที่จุดใด โดยนับแต่ละขั้นตอนตามลำดับที่คุณตั้งไว้
  • กรอบเวลาของรายงานแบบกรวยจะครอบคลุมสูงสุด 30 วันนับจากวันที่เริ่มเข้าสู่ระบบ และรายงานแบบกรวยจะไม่สามารถใช้ได้กับแคมเปญที่ผ่าน API
  • เปรียบเทียบกับกลุ่มควบคุมเสมอ เนื่องจากผู้ใช้จะถูกนับว่ามีการแปลงผลแม้ว่าจะไม่ได้เปิดอ่านข้อความก็ตาม
  • รายงานแบบกรวยจะไม่ติดตามผู้ใช้ที่ไม่มีข้อมูลระบุตัวตน ดังนั้นควรระบุตัวตนผู้ใช้ให้เร็วที่สุดเท่าที่ขั้นตอนของคุณจะเอื้ออำนวย

ความสำเร็จในการเริ่มต้นใช้งานใน Braze ควรหมายถึงอะไร?

การเริ่มต้นใช้งานจะประสบความสำเร็จเมื่อผู้ใช้ใหม่ทำตามขั้นตอนที่บ่งชี้ว่าพวกเขาจะใช้งานต่อไปตามลำดับที่คุณออกแบบไว้ การเปิดอ่านและการคลิกแสดงให้เห็นว่ามีการเห็นข้อความ แต่ไม่ได้แสดงว่ามีใครเปิดใช้งานจริงหรือไม่

ดังนั้น ให้กำหนดความสำเร็จเป็นลำดับเหตุการณ์สำคัญสั้นๆ ก่อนที่คุณจะเลือกตัวชี้วัดใดๆ รูปแบบทั่วไปคือ การเข้าใช้งานครั้งแรก, การตั้งค่าที่สำคัญ, ตามด้วยการใช้งานฟีเจอร์หลักเป็นครั้งแรก แม้ว่าแต่ละผลิตภัณฑ์จะมีรูปแบบเฉพาะของตัวเองก็ตาม

เอกสารประกอบเกี่ยวกับรายงานแบบกรวยของ Braze เองใช้การเริ่มต้นใช้งานเป็นตัวอย่างแรก โดยตั้งคำถามว่ามีผู้ใช้กี่คนที่ทำตามขั้นตอนการเริ่มต้นใช้งานครบถ้วนหลังจากได้รับ Canvas ต้อนรับ ซึ่งนั่นคือคำถามที่ควรเริ่มต้นด้วย

ตัวชี้วัดการเริ่มต้นใช้งานใน Braze รายการใดที่คุณควรใช้เป็นเหตุการณ์การแปลงผลหลัก?

กำหนดให้เหตุการณ์สำคัญในการเปิดใช้งานเป็นเหตุการณ์การแปลงผลหลักของคุณ Braze จะถือว่าเหตุการณ์การแปลงผลแรกที่คุณเพิ่มเป็นเหตุการณ์หลัก และเหตุการณ์นี้จะมีผลต่อการมีส่วนร่วมและการรายงานมากที่สุด

โปรดจำความหมายของการแปลงผล ผู้ใช้จะถูกนับว่ามีการแปลงผลหากพวกเขาทำเหตุการณ์นั้นภายในกรอบเวลาที่กำหนด แม้ว่าพวกเขาจะไม่ได้เปิดหรือคลิกข้อความก็ตาม

สิ่งนี้มีประโยชน์สำหรับการเริ่มต้นใช้งาน ซึ่งผู้ใช้อาจเปิดใช้งานจากภายในแอปแทนที่จะมาจากข้อความ นอกจากนี้ยังหมายความว่าตัวเลขการแปลงผลเพียงอย่างเดียวไม่สามารถพิสูจน์ได้ว่าข้อความนั้นเป็นสาเหตุของการกระทำดังกล่าว ซึ่งเป็นเหตุผลว่าทำไมการเปรียบเทียบกับกลุ่มควบคุมจึงมีความสำคัญ

ใน Canvas การแปลงผลที่เกิดขึ้นภายในกำหนดเวลาจะถูกระบุว่าเป็นผลมาจากขั้นตอนข้อความล่าสุดที่ผู้ใช้ได้รับ โปรดคำนึงถึงเรื่องนี้เมื่อคุณประเมินว่าข้อความการเริ่มต้นใช้งานใดเป็นผู้สร้างผลลัพธ์นั้น

รายงานแบบกรวยแสดงให้เห็นว่าผู้ใช้ใหม่หลุดออกไปที่จุดใดได้อย่างไร?

รายงานแบบกรวยจะแสดงเส้นทางที่ผู้ใช้ดำเนินการหลังจากได้รับแคมเปญหรือ Canvas รวมถึงจุดที่ผู้ใช้หลุดออกไป เหตุการณ์แรกจะเป็นการได้รับข้อความของคุณเสมอ และเหตุการณ์ถัดไปแต่ละเหตุการณ์จะนับผู้ใช้ที่ทำตามขั้นตอนนั้นๆ ตามลำดับที่คุณตั้งไว้

เหตุการณ์สำคัญในการเริ่มต้นใช้งานสามารถจับคู่กับเหตุการณ์ในรายงานแบบกรวยที่ Braze มีให้

เหตุการณ์สำคัญในการเริ่มต้นใช้งานเหตุการณ์ในรายงานแบบกรวยหมายเหตุ
กลับมาใช้งานแอปเริ่มเซสชันสัญญาณพื้นฐานของการกลับมาใช้งาน
ทำขั้นตอนการตั้งค่าเสร็จสิ้นทำเหตุการณ์ที่กำหนดเองต้องบันทึกการกระทำเป็นเหตุการณ์ที่กำหนดเอง
ซื้อครั้งแรกทำการซื้อสำหรับการเริ่มต้นใช้งานเชิงพาณิชย์
เข้าสู่ขั้นตอน Canvas ถัดไปได้รับขั้นตอน Canvasแสดงความคืบหน้าตลอดเส้นทาง
มีส่วนร่วมกับข้อความเริ่มต้นใช้งานโต้ตอบกับขั้นตอนเฉพาะขั้นตอนอีเมลและข้อความแจ้งเตือน (Push) เท่านั้น

คุณสามารถรวมเหตุการณ์ที่คุณไม่เคยตั้งค่าเป็นเหตุการณ์ Conversion ได้ เพื่อให้ Funnel สามารถทดสอบนิยามใหม่ของการเปิดใช้งาน (Activation) โดยไม่ต้องเปลี่ยนแปลง Canvas ที่ใช้งานจริง สำหรับ Canvas รายงานจะอยู่ในส่วน Analyze Variants บนแท็บ Canvas Funnel Report

คุณควรตั้งค่าช่วงเวลาของ Funnel อย่างไร?

เลือกช่วงเวลาที่สอดคล้องกับระยะเวลาที่ควรใช้ในการเปิดใช้งาน Braze ช่วยให้คุณสามารถดูข้อมูลย้อนหลังได้สูงสุด 6 เดือน และกำหนดช่วงเวลาการทำรายการให้สำเร็จได้นานสูงสุด 30 วัน

การนับช่วงเวลาจะแตกต่างกันในกรณีที่เป็นระยะสั้น ช่วงเวลาหนึ่งวันหมายความว่าเหตุการณ์ต้องเกิดขึ้นภายใน 24 ชั่วโมงหลังจากได้รับข้อความ ในขณะที่ช่วงเวลาที่ยาวกว่าจะนับตามวันในปฏิทินตามเขตเวลาของบริษัทคุณ

รายงาน Funnel ไม่รองรับแคมเปญ API ดังนั้นการส่งข้อความต้อนรับ (Onboarding) ผ่าน API จึงต้องใช้วิธีการวัดผลอื่น รายงานอาจใช้เวลาหลายนาทีในการประมวลผล และคุณจะได้รับแจ้งเมื่อรายงานพร้อมใช้งาน

คุณจะเปรียบเทียบตัวแปรต่างๆ ของการต้อนรับผู้ใช้ใหม่ได้อย่างไร?

รายงาน Funnel ช่วยให้คุณเปรียบเทียบกลุ่มควบคุมกับตัวแปรต่างๆ ของคุณได้โดยตรง แต่ละขั้นตอนจะแสดงอัตรา Conversion และเปอร์เซ็นต์ที่เปลี่ยนแปลงไปจากกลุ่มควบคุม

การเปรียบเทียบนั้นคือมาตรวัดความสำเร็จที่แท้จริงของการต้อนรับผู้ใช้ใหม่ เหตุการณ์สำคัญที่ผู้ใช้ส่วนใหญ่ทำสำเร็จจะมีความหมายก็ต่อเมื่อมีผู้ใช้ในกลุ่มควบคุมทำสำเร็จน้อยกว่าเท่านั้น

ผู้ใช้แต่ละคนจะถูกนับ Conversion สูงสุดเพียงครั้งเดียวใน Funnel แม้ว่าพวกเขาจะทำเหตุการณ์นั้นซ้ำก็ตาม ดังนั้นตัวเลขใน Funnel อาจแตกต่างจากจำนวน Conversion มาตรฐาน โดยเฉพาะเมื่อมีการเปิดใช้งานการกลับมามีสิทธิ์ (Re-eligibility)

คุณควรหลีกเลี่ยงข้อผิดพลาดใดบ้างในการวัดผลการต้อนรับผู้ใช้ใหม่?

การเริ่มต้นแบบไม่ระบุตัวตน (Anonymous starts) เป็นข้อผิดพลาดที่พบบ่อยที่สุดในการต้อนรับผู้ใช้ใหม่ เมื่อผู้ใช้ที่ไม่ระบุตัวตนเข้าสู่ Canvas และถูกระบุตัวตนในภายหลัง Braze ID ของพวกเขาจะเปลี่ยนไป และ Braze จะระบุว่ารายงาน Funnel ไม่สามารถติดตามผู้ใช้ที่ขาดการเชื่อมต่อเหล่านี้ได้

หากการต้อนรับผู้ใช้ใหม่ของคุณเริ่มต้นก่อนการลงทะเบียน ให้ระบุตัวตนผู้ใช้ให้เร็วที่สุดเท่าที่ขั้นตอนของคุณจะเอื้ออำนวย มิฉะนั้น Funnel อาจนับจำนวนการเปิดใช้งานต่ำกว่าความเป็นจริง โปรดตรวจสอบการตั้งค่าการระบุตัวตนผู้ใช้กับทีมพัฒนาของคุณก่อนที่จะเชื่อถือตัวเลขเหล่านี้

กฎของวันที่ที่ไม่ตรงกันเป็นข้อผิดพลาดประการที่สอง ระบบวิเคราะห์ของ Canvas จะกรองช่วงวันที่ตามเวลาที่เหตุการณ์เกิดขึ้น ในขณะที่รายงาน Funnel จะกรองตามเวลาที่ผู้ใช้เข้ามาในระบบ

ระบบวิเคราะห์ขั้นตอนของ Canvas อาจแสดงจำนวนที่สูงกว่า Funnel ในช่วงวันที่เดียวกัน เนื่องจาก Funnel มีการบังคับลำดับและเวลา ให้เลือกมุมมองเดียวสำหรับคำถามการรายงานแต่ละข้อ และอย่าใช้ทั้งสองวิธีปนกันในการเปรียบเทียบเดียวกัน

คุณควรตั้งค่าการวัดผลการต้อนรับผู้ใช้ใหม่ตามลำดับใด?

ให้ตั้งค่าตามลำดับนี้ เพื่อให้ข้อมูลพร้อมใช้งานก่อนที่จะมีใครสอบถามผลลัพธ์

  1. จดบันทึกเหตุการณ์สำคัญในการต้อนรับผู้ใช้ใหม่ 3 หรือ 4 รายการ ตามลำดับที่ผู้ใช้ควรทำสำเร็จ
  2. บันทึกเหตุการณ์สำคัญแต่ละรายการเป็นเหตุการณ์ที่กำหนดเอง (Custom Event) หรือตรวจสอบว่ามีอยู่แล้วในระบบ
  3. กำหนดให้เหตุการณ์สำคัญของการเปิดใช้งานเป็นเหตุการณ์ Conversion หลักบน Canvas ของการต้อนรับผู้ใช้ใหม่
  4. เพิ่มกลุ่มควบคุมเพื่อให้สามารถเปรียบเทียบการเปิดใช้งานกับผู้ใช้ที่ไม่ได้รับการต้อนรับได้
  5. ตรวจสอบว่ามีการระบุตัวตนผู้ใช้เมื่อใด และหลีกเลี่ยงการมีผู้ใช้ที่ไม่มีข้อมูลระบุตัวตน (orphaned users) ให้ได้มากที่สุด
  6. สร้างรายงานแบบกรวย (funnel report) โดยเรียงลำดับเหตุการณ์สำคัญ (milestones) และกำหนดกรอบเวลาที่เหมาะสมกับการเปิดใช้งาน (activation)
  7. ตรวจสอบอัตราการลดลงในแต่ละขั้นตอน และปรับเปลี่ยนข้อความก่อนถึงจุดที่มีการลดลงมากที่สุดเป็นอันดับแรก

ข้อผิดพลาดใดบ้างที่คุณควรหลีกเลี่ยง?

ระบุข้อผิดพลาดให้ชัดเจนเพื่อให้ผู้ตรวจสอบสามารถตรวจพบได้ การตัดสินความสำเร็จของการเริ่มต้นใช้งาน (onboarding) ด้วยอัตราการเปิดอ่าน (open-rate) เป็นการวัดผลที่เน้นการมีส่วนร่วมกับข้อความมากกว่าการบรรลุเหตุการณ์สำคัญ

การเริ่มต้นที่ขาดข้อมูลระบุตัวตนจะทำให้สูญเสียผู้ใช้ที่ไม่ได้ระบุตัวตนตั้งแต่แรกเข้า ส่งผลให้อัตราการเปิดใช้งานดูต่ำกว่าความเป็นจริง การเปรียบเทียบข้อมูลที่มีช่วงเวลาต่างกันจะทำให้การนำข้อมูลวิเคราะห์จาก Canvas และตัวเลขจากรายงานแบบกรวยมาวางเทียบกันดูเหมือนว่าเป็นการวัดผลสิ่งเดียวกัน

การให้เครดิตการแปลงผล (conversion) ทั้งหมดแก่ข้อความต้อนรับข้อความสุดท้ายโดยไม่มีกลุ่มควบคุมเพื่อเปรียบเทียบว่าผลลัพธ์จะเป็นอย่างไรหากไม่มีข้อความนั้น ถือเป็นการวัดผลที่คลาดเคลื่อน

ส่วนนี้เชื่อมต่อกับส่วนอื่นๆ ของโปรแกรมอย่างไร?

เส้นทางการเริ่มต้นใช้งานที่คุณกำลังวัดผลนั้นครอบคลุมอยู่ใน แคมเปญการต้อนรับที่ผ่านการพิสูจน์แล้วสิบรูปแบบและการทำระบบต้อนรับผู้ใช้ใหม่ด้วย Braze Canvas แบบอัตโนมัติ. เหตุการณ์สำคัญจะวัดผลได้ดีก็ต่อเมื่อมีการบันทึกข้อมูลอย่างถูกต้องตามที่ระบุไว้ใน การติดตามเหตุการณ์ของผู้ใช้ใน Braze.

การเปรียบเทียบเวอร์ชันของข้อความครอบคลุมอยู่ใน การทำ A/B Testing สำหรับแคมเปญอีเมลของคุณและวิธีการอ่านผลลัพธ์ของอีเมลอยู่ใน การรายงานแคมเปญอีเมล.

ในฐานะพันธมิตรด้านการติดตั้งใช้งาน Braze ทาง CustomerIK แนะนำให้กำหนดการเริ่มต้นใช้งานเป็นเหตุการณ์สำคัญก่อนที่จะเลือกตัวชี้วัด การใช้รายงานแบบกรวยเปรียบเทียบกับกลุ่มควบคุมจะช่วยให้คุณทราบว่าการเริ่มต้นใช้งานได้ผลที่จุดใด และสูญเสียผู้ใช้ไปที่จุดใด

รายงานแบบกรวยเหตุการณ์สำคัญพร้อมตัวหารที่ระบุชื่อชัดเจน

สำหรับแอปโปรเจกต์สมมติ ให้กำหนดเหตุการณ์สำคัญตามลำดับ ได้แก่ สร้างบัญชี บันทึกโปรเจกต์ และทำภารกิจแรกสำเร็จ ระบุเวลาที่อนุญาตระหว่างเหตุการณ์สำคัญและข้อมูลระบุตัวตนที่ใช้เชื่อมโยงเหตุการณ์เหล่านั้น การคลิกอีเมลต้อนรับถือเป็นหลักฐานสนับสนุน ไม่ใช่เหตุการณ์การเปิดใช้งาน

หากมีผู้ใช้ 1,000 คนเข้ามา 600 คนบันทึกโปรเจกต์ และ 300 คนทำภารกิจสำเร็จ อัตราความสำเร็จโดยรวมคือ 30% และอัตราความสำเร็จของภารกิจในกลุ่มผู้สร้างโปรเจกต์คือ 50% ควรระบุตัวหารทั้งสองค่าให้ชัดเจน และเปรียบเทียบกลุ่มที่ได้รับมอบหมายและช่วงเวลาสังเกตการณ์ที่เท่าเทียมกันเมื่อประเมินว่าการเริ่มต้นใช้งานช่วยปรับปรุงผลลัพธ์จริงหรือไม่

กรณีทดสอบผลลัพธ์ที่คาดหวัง
เหตุการณ์ภารกิจเกิดขึ้นโดยไม่มีเหตุการณ์โปรเจกต์ตรวจสอบลำดับเหตุการณ์และข้อมูลระบุตัวตนแทนที่จะสันนิษฐานว่ามีการดำเนินการต่อ
ผู้ใช้ที่ไม่ระบุตัวตนกลายเป็นผู้ใช้ที่ระบุตัวตนทดสอบว่ารายงานเชื่อมโยงหรือแยกข้อมูลระบุตัวตนเหล่านั้นอย่างไร
ผู้ใช้ทำภารกิจสำเร็จหลังจากกรอบเวลาที่กำหนดคงกรอบเวลาเดิมไว้และรายงานการทำภารกิจสำเร็จที่ล่าช้าแยกต่างหาก

ตัวอย่างการทำงานและกรณีทดสอบเหล่านี้เป็นเพียงคำแนะนำเชิงบรรณาธิการเพื่อประกอบความเข้าใจเท่านั้น ไม่ใช่ผลลัพธ์ที่วัดได้จริงจากลูกค้าหรือเป็นการยืนยันว่ามีการทดสอบการเชื่อมต่อระบบจริงแล้ว

คำถามที่พบบ่อย

1. ตัวชี้วัดที่ดีที่สุดสำหรับความสำเร็จในการเริ่มต้นใช้งาน (onboarding) ใน Braze คืออะไร?

ใช้เหตุการณ์สำคัญของการเปิดใช้งานเป็นเหตุการณ์หลักในการแปลงผล จากนั้นใช้รายงานแบบกรวยเพื่อดูแต่ละขั้นตอน และเปรียบเทียบกับกลุ่มควบคุมเพื่อแสดงให้เห็นถึงผลลัพธ์ที่เกิดขึ้น

2. กรอบเวลาของรายงานแบบกรวยใน Braze นานที่สุดได้เท่าใด?

สูงสุด 30 วันนับจากวันที่เข้ามา โดยอยู่ในช่วงเวลาของรายงานที่ครอบคลุมย้อนหลัง 6 เดือน

3. ทำไมรายงานแบบกรวยของฉันจึงแสดงจำนวนผู้ใช้น้อยกว่าข้อมูลวิเคราะห์ใน Canvas?

รายงานแบบ Funnel จะบังคับใช้ลำดับและเวลาของเหตุการณ์รวมถึงการกรองตามวันที่เริ่มต้น ในขณะที่การวิเคราะห์แบบ Canvas จะนับเหตุการณ์ทั้งหมดตามเวลาที่เกิดขึ้นจริง

4. รายงานแบบ Funnel ติดตามผู้ใช้ที่ยังไม่ระบุตัวตนในตอนเริ่มต้นหรือไม่?

ไม่ติดตาม เมื่อผู้ใช้ที่ไม่ระบุตัวตนถูกระบุตัวตนในภายหลัง Braze ID ของพวกเขาจะเปลี่ยนไป และรายงานแบบ Funnel จะไม่ติดตามผู้ใช้ที่ขาดการเชื่อมต่อเหล่านี้

5. ฉันสามารถใช้รายงานแบบ Funnel กับแคมเปญ API ได้หรือไม่?

รายงานเหล่านี้ไม่รองรับการใช้งานกับแคมเปญ API

แหล่งข้อมูล

CustomerIK คือพันธมิตรด้านการติดตั้งใช้งาน Braze ที่เชี่ยวชาญทั้งในด้านการเริ่มต้นใช้งาน การเชื่อมต่อทางเทคนิค การดำเนินงานด้านการตลาด และการจัดการข้อมูลลูกค้า

หากคุณกำลังตั้งค่าการวัดผลการใช้งานครั้งแรก (Onboarding) และต้องการกำหนดเหตุการณ์สำคัญไว้ล่วงหน้า มาคุยกันเถอะ

ค่ากำหนด

ความเป็นส่วนตัวเป็นสิ่งสำคัญสำหรับเรา ดังนั้นคุณจึงมีตัวเลือกในการปิดใช้งานพื้นที่เก็บข้อมูลบางประเภทที่อาจไม่จำเป็นต่อการทำงานพื้นฐานของเว็บไซต์ การบล็อกหมวดหมู่เหล่านี้อาจส่งผลกระทบต่อประสบการณ์ของคุณในการใช้งานเว็บไซต์

ยอมรับคุกกี้ทั้งหมด
ยอมรับคุกกี้ทั้งหมด

รายการเหล่านี้จำเป็นสำหรับการเปิดใช้งานฟังก์ชันพื้นฐานของเว็บไซต์

เปิดใช้งานตลอดเวลา

รายการเหล่านี้ใช้เพื่อแสดงโฆษณาที่เกี่ยวข้องกับคุณและความสนใจของคุณมากขึ้น

รายการเหล่านี้ช่วยให้เว็บไซต์จดจำสิ่งที่คุณเลือก (เช่น ชื่อผู้ใช้ ภาษา หรือภูมิภาคที่คุณอยู่) และมอบฟีเจอร์ที่ปรับปรุงให้ดีขึ้นและเป็นส่วนตัวมากขึ้น

รายการเหล่านี้ช่วยให้ผู้ดูแลเว็บไซต์เข้าใจว่าเว็บไซต์ทำงานอย่างไร ผู้เยี่ยมชมโต้ตอบกับเว็บไซต์อย่างไร และอาจมีปัญหาทางเทคนิคหรือไม่

ขอบคุณ! เราได้รับข้อมูลที่คุณส่งมาแล้ว!
โอ๊ะ! เกิดข้อผิดพลาดบางอย่างขณะส่งแบบฟอร์ม