ตรวจสอบประสิทธิภาพของตัวแทนด้วยเมตริก

หลังจากเปิดตัวแล้ว Business Messages จะติดตามเมตริกประสิทธิภาพที่สำคัญ สำหรับตัวแทนของคุณ คุณสามารถเข้าถึงเมตริกของคุณผ่านทางธุรกิจ นักพัฒนาด้านการสื่อสาร คอนโซล หรือผ่าน BigQuery

หากต้องการข้อมูลวิเคราะห์เพิ่มเติมเพื่อวัดความสำเร็จของตัวแทน คุณสามารถ ติดตามเมตริกที่กำหนดเอง โดยตรวจสอบเหตุการณ์และแอตทริบิวต์อื่นๆ การสนทนาของตัวแทนของคุณ

เข้าถึงเมตริก

คุณเข้าถึงเมตริกระดับพาร์ทเนอร์และระดับตัวแทนได้ในรายงาน Data Studio ผ่าน Business Communications Developer Console อีกวิธีหนึ่งคือ ใช้ BigQuery เพื่อเรียกดูหรือเข้าถึงเมตริก Agent แบบเป็นโปรแกรม

หากต้องการให้สิทธิ์เข้าถึงเมตริกแก่ผู้ใช้รายอื่น

  1. เพิ่มเป็นผู้ใช้ กับบัญชีพาร์ทเนอร์ของคุณ
  2. แนะนำวิธีเข้าถึงเมตริกผ่านทางการสื่อสารทางธุรกิจ Developer Console หรือ BigQuery

เมตริกระดับพาร์ทเนอร์

เมตริกระดับพาร์ทเนอร์แสดงข้อมูลของตัวแทนทั้งหมดที่คุณจัดการ

  1. เปิดนักพัฒนาการสื่อสารทางธุรกิจ คอนโซล และลงชื่อเข้าใช้ด้วยบัญชี Google Business Messages
  2. คลิกดูเมตริกที่ด้านล่างของการ์ดแดชบอร์ดเมตริก

เมตริกระดับตัวแทน

เมตริกระดับตัวแทนจะแสดงข้อมูลสำหรับ Agent ที่เลือกเท่านั้น

  1. เปิดนักพัฒนาการสื่อสารทางธุรกิจ คอนโซล และลงชื่อเข้าใช้ด้วยบัญชี Google Business Messages
  2. เลือกตัวแทนของคุณ

    เมตริกจะปรากฏในการ์ดแดชบอร์ดเมตริก

หากต้องการดูเมตริกโดยละเอียดเพิ่มเติม ให้คลิก Analytics ในการนำทางด้านซ้าย

เมตริกผ่าน BigQuery

BigQuery เป็นแบบ Serverless คลังข้อมูลที่คุ้มค่าและรองรับการปรับขนาด พร้อมแมชชีนเลิร์นนิงและข้อมูลที่ใช้งานง่าย และการวิเคราะห์ตามการคาดการณ์ คุณเข้าถึงข้อมูลใน BigQuery ได้ด้วยวิธีใดวิธีหนึ่งต่อไปนี้ BigQuery UI หรือ BigQuery API ขึ้นอยู่กับกรณีการใช้งานของคุณ โปรดดู BigQuery เอกสารประกอบ

ข้อมูลเมตริกใน BigQuery จะใช้ได้เป็นเวลา 1.5 ปี

หากต้องการเข้าถึงเมตริก Agent ใน BigQuery คุณต้องมีคุณสมบัติตรงตามข้อกำหนดต่อไปนี้ ข้อกำหนด

เมื่อมีสิทธิ์เข้าถึง BigQuery คุณจะสามารถเข้าถึงข้อมูลของตัวแทนใน โปรเจ็กต์ ชุดข้อมูล และมุมมองต่อไปนี้

  • รหัสโปรเจ็กต์: bizcomms-bm-metrics
  • ชุดข้อมูล: partner_metrics_user_views และ partner_metrics_sa_views
  • การดู: message_metrics, session_metrics, quality_metrics และ intent_metrics

เช่น หากต้องการดูช่องทั้งหมดจากมุมมอง message_metrics คุณอาจใช้เมธอด คำค้นหาต่อไปนี้:

SELECT * FROM bizcomms-bm-metrics.partner_metrics_user_views.message_metrics

เมตริกที่พร้อมใช้งาน

Business Messages จะติดตามเมตริกใน 4 หมวดหมู่ต่อไปนี้ ข้อความ, เซสชัน, คุณภาพและความตั้งใจ

รายการต่อไปนี้คือรายการที่ใช้ร่วมกันได้ในทุกหมวดหมู่เมตริก

เมตริก คำจำกัดความ ค่าตัวอย่าง
date วัน (เวลา UTC) ที่สร้างเซสชัน 2021-12-31
โปรดดู ประเภทวันที่ของ BigQuery
agent_id รหัสของ Agent ที่ระบบกำลังคำนวณข้อมูลเซสชัน 12345678-9012-3456-789012345678
agent_name ชื่อตัวแทน Growing Tree Bank
brand_id รหัสของแบรนด์ที่ตัวแทนเป็นสมาชิก 12345678-9012-3456-789012345678
brand_name ชื่อของแบรนด์ที่มีตัวแทนอยู่ Growing Tree International
partner_id รหัสของพาร์ทเนอร์ที่เป็นตัวแทนของแบรนด์ 12345678-9012-3456-789012345678
partner_name ชื่อของพาร์ทเนอร์ที่แสดงถึงแบรนด์ XYZ Messaging

เมตริกข้อความ

เมตริกข้อความมาจากจำนวนข้อความที่ส่งแล้วทั้งหมด วันที่กำหนด เมตริกเหล่านี้ประกอบด้วยรายการต่อไปนี้

เมตริก คำจำกัดความ ค่าตัวอย่าง
message_sender ใครเป็นผู้ส่งข้อความ USER,
AGENT
message_type ประเภทของข้อความ TEXT,
RICH_TEXT,
PHOTO,
RICH_CARD
representative_type ประเภทของตัวแทนที่ส่งข้อความนี้ ล้างสำหรับข้อความ ที่ส่งโดยผู้ใช้ BOT,
HUMAN
total_messages จำนวนข้อความที่ส่งแล้วทั้งหมด 11

เมตริกเซสชัน

เซสชันคือการจัดกลุ่มการโต้ตอบที่มีเวลาจำกัด เช่น ข้อความและ กิจกรรมในการสนทนา เซสชันจะเริ่มต้นเมื่อมีการส่งข้อความและเซสชัน ไม่ทำงานในขณะนี้ เซสชันจะปิดเมื่อ

  • ไม่มีข้อความสำหรับเวลาทำการใน 24 ชั่วโมงทำการ (สำหรับตัวแทนที่ดำเนินการโดยเจ้าหน้าที่เท่านั้น ความพร้อมใช้งานของการรับส่งข้อความ] (/business-communications/business-messages/guides/how-to/agents /availability) หากมี < เราจะใช้เวลา 24 ชั่วโมงทําการใน 7 วันข้างหน้า ให้ใช้ 24 ชั่วโมงแทน)
  • ไม่มีข้อความเป็นเวลา 30 นาที (สำหรับตัวแทนที่มีการส่งข้อความเฉพาะบ็อตเท่านั้น) ความพร้อมจำหน่ายสินค้า [availability])
  • คุณส่งแบบสำรวจ ถึงผู้ใช้
  • ผู้ใช้ลบการสนทนา
  • ผู้ใช้บล็อก Agent

เมตริกเซสชันมาจากจำนวนเซสชันทั้งหมด ทั้งที่ใช้งานอยู่และ เสร็จสมบูรณ์ในวันที่ระบุ เมตริกเหล่านี้ประกอบด้วยรายการต่อไปนี้

เมตริก คำจำกัดความ ค่าตัวอย่าง
session_initiator ผู้ที่เริ่มต้นเซสชัน USER,
AGENT
session_initiating_entry_point จุดแรกเข้าที่เริ่มต้นเซสชัน โปรดดู EntryPoint
session_containment_type ประเภทของการโต้ตอบกับตัวแทน ในการสนทนา ตั้งแต่ จากข้อความที่ไม่มีตัวแทน เป็นข้อความจากบ็อตเท่านั้นจนถึงตัวแทนแบบสด ข้อความ UNRESPONDED,
BOT_ONLY_CONVERSATION,
LIVE_AGENT_REQUEST_UNFULFILLED,
LIVE_AGENT_CONVERSATION,
CALL_INITIATED
has_agent_response เซสชันมีการตอบกลับจากตัวแทนอย่างน้อย 1 รายการ TRUE,
FALSE
has_live_agent_response เซสชันมีการตอบกลับอย่างน้อย 1 รายการจากตัวแทนแบบเรียลไทม์ TRUE,
FALSE
has_live_agent_request เซสชันมีคำขอตัวแทนแบบเรียลไทม์อย่างน้อย 1 รายการ TRUE,
FALSE
session_depth_bucket จำนวนข้อความที่มีการแลกเปลี่ยนระหว่างเซสชัน 1,
2-3,
4-9,
10-24,
25-
survey_sent หากมีการส่งแบบสำรวจสำหรับเซสชันนี้ TRUE,
FALSE
survey_responded หากผู้ใช้ตอบแบบสำรวจ TRUE,
FALSE
positive_survey_response หากคำตอบในแบบสำรวจมีคะแนนเชิงบวก มีความหมายก็ต่อเมื่อ survey_responded คือTRUE TRUE,
FALSE
total_sessions จำนวนเซสชันทั้งหมด 1000
average_session_depth จำนวนข้อความโดยเฉลี่ยที่รับส่งกันระหว่างเซสชัน 23.11

เมตริกคุณภาพ

เมตริกคุณภาพมาจากจำนวนเซสชันที่สำเร็จทั้งหมดใน วันที่กำหนด เมตริกเหล่านี้ประกอบด้วยรายการต่อไปนี้

เมตริก คำจำกัดความ ค่าตัวอย่าง
date_calculated วัน (เวลา UTC) ที่ระบุเวลาที่คำนวณเมตริก 2021-12-31
โปรดดู ประเภทวันที่ของ BigQuery
state สถานะปัจจุบันของ Agent GOOD_STANDING,
REQUIRES_ATTENTION
survey_count จำนวนแบบสำรวจที่ใช้คำนวณคะแนนแบบสำรวจ หากมี คำตอบจากแบบสำรวจน้อยกว่า 10 รายการในช่วง 7 วันที่ผ่านมา โดยเทียบกับ ระบบจะใช้แบบสํารวจ (สูงสุด 9 รายการ) ในช่วง 35 วันที่ผ่านมา หรือไม่เช่นนั้น แบบสำรวจทั้งหมด และจะใช้คำตอบในช่วง 7 วันที่ผ่านมา 84
survey_score เปอร์เซ็นต์ของคำตอบในแบบสำรวจเชิงบวก ค่าอยู่ในช่วงระหว่าง 0 ถึง 1
session_count จำนวนเซสชันที่ใช้ในการคำนวณ MRR หากมีน้อยกว่า 3 รายการ เซสชันในช่วง 7 วันที่ผ่านมา จากนั้นเซสชันล่าสุด (สูงสุด 9 รายการ) จากช่วง 35 วันที่ผ่านมา หรือเซสชันทั้งหมดในช่วง 7 ที่ผ่านมา วัน 143
mrr อัตราการตอบกลับของผู้ขาย (MRR) จำนวนเซสชันที่มี การตอบกลับของตัวแทน (บ็อตหรือตัวแทนแบบเรียลไทม์) ที่สัมพันธ์กับจำนวนรวมของ เซสชัน ค่าอยู่ในช่วงระหว่าง 0 ถึง 1
hmrr อัตราการตอบกลับที่เป็นมนุษย์ (HMRR) จำนวนเซสชันที่ มีการตอบกลับจากตัวแทนแบบเรียลไทม์ที่สัมพันธ์กับจำนวนเซสชันทั้งหมด มีคำขอของตัวแทนแบบเรียลไทม์หรือการตอบกลับของตัวแทนแบบเรียลไทม์อย่างน้อย 1 รายการ ค่าอยู่ในช่วงระหว่าง 0 ถึง 1
live_agent_request_count จำนวนคำขอตัวแทนแบบเรียลไทม์ที่ใช้ในการคำนวณ hmrr ถ้า มีคำขอตัวแทนแบบเรียลไทม์น้อยกว่า 10 รายการในช่วง 7 วันที่ผ่านมา ใช้คำขอตัวแทนแบบเรียลไทม์ 9 รายการล่าสุดในช่วง 35 วันที่ผ่านมา มิเช่นนั้นระบบจะใช้คำขอตัวแทนแบบเรียลไทม์ทั้งหมดในช่วง 7 วันที่ผ่านมา 42
suspension_date วัน (เวลา UTC) ที่ตัวแทนอาจถูกระงับเนื่องจากมีคุณภาพต่ำ ตั้งค่าให้สำหรับตัวแทนที่มีสถานะ "REQUIRES_ATTENTION" เท่านั้น 2021-12-31
โปรดดู ประเภทวันที่ของ BigQuery

เมตริกความตั้งใจ

เมตริกความตั้งใจใช้แมชชีนเลิร์นนิงเพื่อระบุความตั้งใจของเซสชันที่มี ตัวแทน เมตริก Intent ดึงมาจากข้อความของผู้ใช้ในเซสชันที่เสร็จสมบูรณ์สำหรับ ในวันที่ระบุ ภาษาอังกฤษเท่านั้น เมตริกเหล่านี้ประกอบด้วยรายการต่อไปนี้

เมตริก คำจำกัดความ ค่าตัวอย่าง
intent ประเภท Intent ของเซสชัน SALES_LEAD,
SERVICE
count จำนวนเซสชันที่มีประเภท intent ที่ระบุ 11

ติดตามเมตริกที่กำหนดเอง

หากมีค่ากำหนดเมตริกที่แตกต่างออกไปหรือต้องการข้อมูลเชิงลึกเพิ่มเติม มากกว่าที่มีในรายงานคุณภาพ คุณก็สามารถเก็บข้อมูลเมตริกของตัวเองได้

ต่อไปนี้คือเมตริกบางส่วนที่คุณอาจบันทึกไว้

  • ความพึงพอใจของลูกค้า ส่ง แบบสำรวจ เพื่อบันทึกและติดตามความพึงพอใจของผู้ใช้ คุณปรับแต่งแบบสำรวจได้ เพื่อให้เหมาะกับความต้องการในการเก็บรวบรวมข้อมูลของคุณ
  • ส่งข้อความแล้ว บันทึกรายละเอียดทุกครั้งที่ตัวแทน ส่งข้อความ
  • ได้รับข้อความแล้ว บันทึกรายละเอียดทุกครั้งที่ตัวแทน ได้รับข้อความ
  • อัตราการตอบของตัวแทน บันทึกความถี่ที่ตัวแทนตอบสนองผู้ใช้ ข้อความ ติดตามความแตกต่างระหว่างอัตราการตอบกลับของบ็อตและอัตราการตอบกลับของตัวแทนแบบเรียลไทม์
  • เวลาตอบกลับของตัวแทน บันทึกระยะเวลาที่ตัวแทนใช้ในการตอบกลับ ข้อความของผู้ใช้ ติดตามความแตกต่างระหว่างบ็อตและการตอบกลับของตัวแทนแบบเรียลไทม์ ครั้ง
  • ใบตอบรับการส่ง บันทึกเหตุการณ์ DELIVERED รายการ
  • ใบตอบรับการอ่าน บันทึกเหตุการณ์ READ รายการ
  • การมีส่วนร่วมของผู้ใช้ บันทึกเหตุการณ์ IS_TYPING รายการ จํานวนผู้ใช้ และความแตกต่างของเวลาระหว่าง DELIVERED กับ READ เหตุการณ์กับ การตอบกลับต่อไปนี้จากผู้ใช้
  • ประเภทการโต้ตอบ ระบุวิธีที่ผู้ใช้ตอบข้อความ ใช้ ข้อมูลระบบรายงานผล Conversion ที่มีความหมายเพื่อติดตามการตอบกลับและการดำเนินการที่แนะนำ รวมถึงตรวจสอบ รูปแบบการตอบสนองเพื่อระบุว่าผู้ใช้ส่งรูปภาพหรือข้อความธรรมดา

เมื่อบันทึกเมตริกแล้ว คุณจะแยกวิเคราะห์และจัดระเบียบได้ตามความเหมาะสม ความต้องการของธุรกิจคุณ

เกณฑ์การระงับและการตรวจสอบประสิทธิภาพและ

Business Messages จะติดตามเมตริกหลายรายการเพื่อประเมินประสิทธิภาพของตัวแทน ที่ตัวแทนจะมอบประสบการณ์ ที่ดีแก่ผู้ใช้ ในกรณีที่ตัวแทนอยู่ต่ำกว่าเมตริก Business Messages จะแจ้งเตือนให้คุณทราบทางอีเมลสถานะตัวแทนรายสัปดาห์ หากมี ตัวแทนจะยังคงต่ำกว่าเกณฑ์เป็นเวลา 28 วัน Business Messages อาจระงับ ตัวแทน หากตัวแทนของคุณถูกระงับ โปรดดูแก้ไขการระงับ Agent

Business Messages ใช้เมตริกต่อไปนี้ในการติดตามประสิทธิภาพของตัวแทน

เมตริก คำอธิบาย เกณฑ์ปริมาณ เกณฑ์ระดับเสียงปกติ เกณฑ์ระดับเสียงต่ำ
ความพึงพอใจของลูกค้า (CSAT) คะแนนความพึงพอใจของลูกค้าบ่งบอกถึงประสบการณ์โดยรวม ที่ลูกค้ามีหลังจากมีส่วนร่วมกับตัวแทน แบบสำรวจ 10 รายการ 80% 0%
อัตราการตอบกลับของผู้ขาย (MRR) จำนวนเซสชันที่มีการตอบกลับจากตัวแทน (บ็อตหรือตัวแทนแบบสด) เมื่อเทียบกับจำนวนเซสชันทั้งหมด 3 เซสชัน 95% 60%
อัตราการตอบกลับที่เป็นมนุษย์ (HMRR) จำนวนเซสชันที่มีการตอบกลับของตัวแทนแบบเรียลไทม์ที่สัมพันธ์กับ จำนวนเซสชันทั้งหมดที่มีคำขอตัวแทนแบบเรียลไทม์อย่างน้อย 1 รายการ หรือการตอบกลับของตัวแทนแบบเรียลไทม์ คำขอตัวแทนแบบเรียลไทม์ 10 รายการ 95% 0%

ระบบจะวัดปริมาณของแต่ละเมตริกเทียบกับเกณฑ์ปริมาณเมตริกอิสระ ด้านบนหรือล่าง ซึ่งจะเป็นตัวกำหนดว่าสามารถวัดประสิทธิภาพของ Agent ได้หรือไม่ เมื่อเทียบกับเกณฑ์ปริมาณการขายปกติหรือเกณฑ์ปริมาณการเข้าถึงต่ำสำหรับเมตริกนั้น

ตัวอย่างเช่น หากตัวแทนมีแบบสำรวจ 9 รายการ 10 เซสชัน และคำขอตัวแทนแบบเรียลไทม์ 9 รายการ ประสิทธิภาพของ Agent จะถูกวัดเทียบกับเกณฑ์ของ 0 สำหรับ CSAT, 95 สําหรับ MRR และ 0 สําหรับ HMRR หากตัวแทนอยู่ต่ำกว่าเกณฑ์ ตัวแทนจะถูกทำเครื่องหมายในช่อง "ต้องดำเนินการ"

หากตัวแทนยังคงอยู่ในสถานะ "ต้องดำเนินการ" 28 วันขึ้นไป ตัวแทนอาจถูกระงับ

ปรับปรุงเมตริก

หากตัวแทนมีประสิทธิภาพต่ำ ให้ตรวจสอบว่าตัวแทนดำเนินการดังนี้

ประมวลผลและตอบกลับข้อความโดยไม่มีปัญหาทางเทคนิค

  • ยืนยันว่าเว็บฮุค ที่ได้รับ รับทราบ ประมวลผล และกำหนดเส้นทางข้อความขาเข้าทั้งหมด โดยไม่คำนึงถึง ประเภทหรือเนื้อหา
  • ตรวจสอบว่าตัวแทนของคุณมีกลยุทธ์สำรองที่มีประสิทธิภาพในกรณีที่ ไม่มีฟิลด์ที่จำเป็นในเพย์โหลดข้อความ ผู้ใช้หายไปหรือลดลง เพราะการที่ฟิลด์หายไป จะทำให้ผู้ใช้ได้รับประสบการณ์การใช้งานที่ไม่ดี
  • ยืนยันว่าตัวแทนของคุณเสร็จเรียบร้อยแล้ว ส่งทั้งหมด ประเภทข้อความที่ต้องการ

ตอบกลับอย่างชาญฉลาดและแสดงความเห็นอกเห็นใจ

  • ตอบทุกข้อความ การตอบกลับอัตโนมัติสามารถช่วยให้คุณจัดการกับข้อความทั่วๆ ไปได้ คำถาม
  • คำนึงถึงผู้ใช้ จุดแรกเข้าของการสนทนา และตอบกลับตามนั้น ตัวอย่างเช่น ผู้ใช้ที่มาจาก Google Maps มีแนวโน้มที่จะสนใจ ข้อมูลเฉพาะของสถานที่ เช่น เวลาเปิดทำการและการตรวจสอบสต็อกสินค้า
  • สำหรับข้อความที่อิงตามตำแหน่ง ให้กำหนดเส้นทางคำถามไปยังบุคคลที่เหมาะสมที่สุด เหมาะที่จะตอบสนองกับพวกเขา
  • หากตัวแทนแบบเรียลไทม์ไม่พร้อมใช้งาน ให้ใช้การทำงานอัตโนมัติเพื่อตอบกลับผู้ใช้ แจ้งเวลาพูดคุยในแชทของตัวแทนและช่องทางอื่นๆ ที่ตัวแทนอาจติดต่อได้ บุคคล (เช่น หมายเลขโทรศัพท์ของฝ่ายสนับสนุน)

ให้คำแนะนำ

  • ใช้การต้อนรับ ข้อความ เขียนด้วยน้ำเสียงที่อบอุ่นและเป็นกันเอง เพื่อกำหนดความคาดหวังเกี่ยวกับสิ่งที่ ที่ตัวแทนสามารถทำได้
  • ใช้การสนทนา เงื่อนไขเริ่มต้น เพื่อแนะนำผู้ใช้เกี่ยวกับงานทั่วไปหรืองานอัตโนมัติ
  • หากผู้ใช้ถามคำถามที่ตัวแทนจัดการไม่ได้ โปรดตอบกลับด้วย เกี่ยวกับประเภทของคำถามที่สามารถตอบได้

จัดการข้อมูลอย่างระมัดระวัง

  • หากเป็นไปได้ ให้รวบรวมข้อมูลตำแหน่งและข้อมูลอื่นๆ จากข้อความที่คุณ รับ มากกว่าร้องขอ
  • อย่าขอข้อมูลที่ละเอียดอ่อน (ข้อมูลเข้าสู่ระบบ ธนาคาร/เครดิต รายละเอียด หมายเลขประจำตัวส่วนบุคคล)
  • ขอข้อมูลเมื่อจำเป็นเท่านั้น การเข้าถึงข้อมูลมากเกินไปทำให้เกิดผู้ใช้ที่ไม่เหมาะสม ประสบการณ์การใช้งาน
  • เมื่อคุณต้องการข้อมูล โปรดบอกเหตุผลอย่างชัดเจนว่าคุณจะนำข้อมูลไปใช้ทำอะไร

ทำงานไม่พร้อมกัน

  • อย่าทำเครื่องหมายการสนทนาว่าไม่ได้ใช้งาน การสื่อสารผ่านธุรกิจ Messages แสดงพร้อมกัน ดังนั้นผู้ใช้อาจไม่ตอบกลับทันที
  • อย่าติดตามผลผู้ใช้ที่ไม่ตอบสนอง ไม่มีการเชื่อมต่อผู้ใช้หลังจาก ออกจากการสนทนา

ดูคำแนะนำเพิ่มเติมเกี่ยวกับประสิทธิภาพของตัวแทนได้ในข้อกำหนด และ หลักเกณฑ์