เรากำลังทำงานอย่างต่อเนื่องเพื่อพัฒนาและปรับปรุงประสบการณ์ของผู้ใช้กับ Guru ตั้งแต่การสร้างความรู้ในตัวแก้ไขของเรา ไปจนถึงวิธีการที่ได้แชร์ผ่าน Slack, Teams และอื่นๆ. พื้นที่หนึ่งที่มีความสำคัญต่อทีมของเราคือฟังก์ชันการค้นหาของเรา ซึ่งเป็นแกนกลางสำหรับการใช้งานแพลตฟอร์มของเราในการค้นหาและแชร์ความรู้. เมื่อเดือนพฤศจิกายนที่ผ่านมา เราได้แชร์ ภาพรวม ว่าเรานำข้อมูลผลิตภัณฑ์มาใช้เพื่อปรับปรุงการค้นหาใน Guru อย่างไร. ตั้งแต่นั้นมา เราไม่ได้ชะลอตัวลงเลย โดยได้ปรับปรุงทีละน้อยของ UI การค้นหาในเว็บแอปและเบราว์เซอร์ รวมถึงปรับปรุงโดยตรงต่ออัลกอริธึมของเรา. วันนี้เราจะมาพูดคุยในช่วงถาม-ตอบกับสมาชิกสองคนจากทีมค้นหาที่มุ่งมั่นของเราเพื่อทำความเข้าใจว่าเราทำอย่างไรให้แน่ใจว่าการค้นหาใน Guru กำลังพัฒนาอย่างต่อเนื่อง.

ขอบคุณที่เข้าร่วมกับเรา โนรา และ เยฟ! คุณช่วยแนะนำตัวเองและบอกเรานิดหน่อยเกี่ยวกับสิ่งที่คุณทำที่ Guru ได้ไหม?

โนรา: ขอบคุณที่มีเรา! ฉันชื่อ โนรา เวสต์ และฉันเป็นผู้จัดการผลิตภัณฑ์ระดับอาวุโสสำหรับทีมค้นหาและการเขียนที่ Guru.

เยฟ: ขอบคุณ ซิดนีย์. ฉันชื่อ เยฟ เมเยอร์ และฉันเป็นนักวิทยาศาสตร์ข้อมูลระดับเจ้าหน้าที่ที่ Guru.

เพื่อเริ่มต้น ฉันต้องการถามเกี่ยวกับทีมค้นหาของเรา (“กลุ่ม”) ที่ Guru. หลายคนอาจไม่รู้ด้วยซ้ำว่าเรามีทีมที่มุ่งมั่นในการทำงานด้านประสบการณ์การค้นหา — คุณช่วยเล่าเกี่ยวกับทีมนี้ให้เราฟังหน่อยได้ไหม?

เยฟ: กลุ่มค้นหาของเราเป็นทีมที่ข้ามฟังก์ชันซึ่งมุ่งมั่นอย่างเต็มที่เพื่อทำงานเดียวในการมอบประสบการณ์การค้นหาที่ราบรื่นแก่ลูกค้าของเรา. กลุ่มค้นหานำผู้พัฒนาผังการมารวมกัน, นักออกแบบ, วิศวกรด้านหน้า, วิศวกรด้านหลัง, สถาปนิก, นักวิทยาศาสตร์ข้อมูล, วิศวกรการเรียนรู้ของเครื่อง และผู้จัดการผลิตภัณฑ์เข้าด้วยกันเพื่อวางแผนและดำเนินการวิธีการที่สมดุลและเหมาะสมในการขยายศักยภาพการค้นหาของเรา.

โนรา: ใช่ แน่นอน. ไม่ว่าจะเป็นชื่อจริงของเราหรือไม่ เราทำงานร่วมกันเป็นทีมเพื่อสร้างประสบการณ์การค้นหาที่น่าทึ่ง โดยมุ่งเน้นทั้งการออกแบบภายนอกของการค้นหาและการทำงานของอัลกอริธึมภายใน. ฉันช่วยจัดลำดับความสำคัญของงานของเราตามข้อมูลที่เราได้รับ, เป้าหมายของบริษัท และข้อมูลเชิงลึกในตลาดที่เกี่ยวข้อง.

เยฟ: ฉันช่วยทีมในการนำการประมวลผลภาษาธรรมชาติ (NLP) และการเรียนรู้ของเครื่อง (ML) เข้ามาใช้ในทุกด้านของการค้นหา. ฉันยังช่วยทีมในการคิดกลยุทธ์การทดลอง ซึ่งสร้างสมดุลระหว่างความคิดเห็นของลูกค้า, เมตริกการทำงานค้นหาและข้อมูลเชิงลึกของทีม/เทคโนโลยีอย่างระมัดระวัง.

การค้นหาไม่ใช่สิ่งที่ผู้คนให้ความสำคัญมากนักแต่เป็นฟังก์ชันหลักของเครื่องมือ เช่น Guru. คุณช่วยให้ภาพรวมพื้นฐานเกี่ยวกับวิธีการทำงานของการค้นหาของ Guru ได้ไหม?

เยฟ: ไม่เพียงแต่การค้นหามีความสำคัญอย่างยิ่ง แต่ตามที่ Google เองได้กล่าวไว้ มันไม่ใช่ปัญหาที่แก้ไขได้ และยากมาก. ในขณะที่ผู้คนส่วนใหญ่มักไม่ค่อยคิดมากเกี่ยวกับการค้นหาในผลิตภัณฑ์ซอฟต์แวร์ (เพราะพวกเขาคุ้นเคยกับการ “ค้นหา” สิ่งต่างๆ) มีหลายสิ่งที่เกิดขึ้นในเบื้องหลัง. ตั้งแต่การเข้าใจการค้นหา (เช่น การอนุมานเจตนา, การดึงความหมายเชิงนัย, การแก้ไขข้อผิดพลาดในการสะกด, การเขียนคำค้นใหม่โดยใช้คำพ้อง หรือวิธีการอื่นๆ เพื่อดึงเจตนาที่ดีกว่า ฯลฯ.) ไปจนถึงการนำเข้าสภาพการค้นหา, การดึงและจัดอันดับผลลัพธ์ ทุกอย่างในขนาดใหญ่ — นี่คือปัญหาที่ยากและน่าสนใจ. Guru สร้างจากผลงานที่ก้าวล้ำในด้านการค้นจากทีมที่อยู่เบื้องหลังโครงการโอเพ่นซอร์ส Lucene, Solr และ Elasticsearch รวมถึงทีมจากบริษัทต่างๆ เช่น Lucidworks, Elastic, Google และ AWS เพื่อให้แน่ใจว่าเรานำความรู้ที่เกี่ยวข้องที่สุดไปให้ผู้ใช้ของเรา.

คุณดูตัวชี้วัดอะไรบ้างเพื่อตัดสินใจว่า “ดี” แค่ไหนที่การค้นหาของเราทำงาน? คุณระบุโอกาสในการปรับปรุงและ/หรือพัฒนาการค้นหาใน Guru ได้อย่างไร?

เยฟ: เรามองที่ตัวชี้วัดทั้งเชิงคุณภาพและเชิงปริมาณ. ในด้านเชิงปริมาณ เราใช้เวลาไปมากในการสร้างการติดตามกิจกรรมในผลิตภัณฑ์ เพื่อที่เราจะสามารถติดตามข้อมูลการโต้ตอบระหว่างผู้ใช้กับผลิตภัณฑ์ได้. โดยการดูข้อมูลการโต้ตอบนั้น เราสามารถวัดได้อย่างแม่นยำว่าการค้นหาทำงานได้ดีแค่ไหน. เรากลับผลลัพธ์ที่เกี่ยวข้องหรือไม่? ผู้ใช้มีการโต้ตอบกับมันหรือไม่? อย่างไร? ผลลัพธ์เหล่านี้ปรากฏอยู่ในตำแหน่งใดเมื่อผู้ใช้มีการโต้ตอบกับมัน? นอกจากการเรียกคืน, ความแม่นยำเฉลี่ย (MAP) และเมตริกอื่นๆ ที่มักใช้เพื่อตอบคำถามเหล่านี้ เรายังมองที่ความผิดหวังของผู้ใช้ด้วย. ผู้คนค้นหาอะไรอีกโดยไม่ทำงานกับผลลัพธ์การค้นหา? พวกเขากำลังปรับปรุงคำค้นหาของพวกเขาหรือไม่? นี่คือแค่ตัวอย่างทั่วไปบางประการและแต่ละคำถามสามารถปรับให้เหมาะสมกับส่วนนั้นของผลิตภัณฑ์และบริบทเฉพาะการรวม เป็นต้น.

โนรา: ตามที่เยฟกล่าว ข้อมูลทำให้เราได้เห็นแนวทางที่ยอดเยี่ยมในการกระทำที่ผู้ใช้ของเรากำลังทำ ซึ่งช่วยให้เราสามารถวัดผลการค้นหาในช่วงเวลาได้. ด้วยข้อมูลเชิงลึกเหล่านี้ เราสามารถปรับแต่งได้ตามการกระทำที่เราเห็นว่าผู้ใช้ทำอย่างต่อเนื่อง และช่วยเหลือในกรณีที่เราเห็นผลลัพธ์ที่ไม่ดี. ตัวอย่างเช่น เราเห็นว่าคำค้นหาของผู้ใช้มักมีคำที่อยู่ในชื่อการ์ดที่พวกเขากำลังมองหา ดังนั้นเราจึงได้แนะนำการค้นหาชื่ออย่างรวดเร็วเพื่อช่วยให้พวกเขาไปยังการ์ดเหล่านั้นได้เร็วขึ้น. ในขณะนี้ เรากำลังมุ่งเน้นการปรับปรุงประสิทธิภาพสำหรับการค้นหาที่ยาวนานขึ้น. ข้อมูลยังช่วยยืนยันการเปลี่ยนแปลงก่อนที่จะนำไปใช้ในผลิตภัณฑ์. ด้วยการทดสอบของเรา เราจึงสามารถดูได้ว่าการเปลี่ยนแปลงในอัลกอริธึมที่เสนอจะ พัฒนาผลลัพธ์ก่อนที่จะถูกเผยแพร่ให้กับลูกค้า — ดังนั้นเราจึงมั่นใจว่าการเปลี่ยนแปลงใด ๆ ที่เรา ทำ ปล่อยออกมาจะช่วยปรับปรุงประสบการณ์การค้นหา.

เยฟ: ในด้านเชิงคุณภาพ เรายังคงตรวจสอบความคิดเห็นของลูกค้า และพูดคุยกับลูกค้าในเวลาเดียวกันเมื่อเป็นไปได้เพื่อตัดสินใจว่าอะไรทำงานอยู่และอะไรไม่ทำงาน.

โนรา: ใช่ เราคุยกับผู้ใช้เท่าที่เราทำได้ — ข้อมูลช่วยให้เราอนุมานได้เป็นอย่างมาก แต่การพูดคุยกับผู้ใช้ช่วยให้เราเข้าใจแรงจูงใจเบื้องหลังการกระทำเหล่านี้. สิ่งนี้ช่วยให้เราได้ตรวจสอบหรือหักล้างแนวโน้มที่เรากำลังเห็นในข้อมูล. ตัวอย่างเช่น เมื่อลองดูการ์ดที่ผู้ใช้ใช้กันบ่อย ๆ พวกมันมักจะถูกจำกัดให้มีกี่คอลเลกชันและบอร์ด. เมื่อเราพูดคุยเรื่องนี้กับผู้ใช้ อย่างไรก็ตาม พวกเขามักจะไม่ทราบโครงสร้างการจัดระเบียบของทีม Guru ของพวกเขา. นี่บอกเราว่าการกรองด้วยโครงสร้างองค์กรเพิ่มเติมในการค้นหาอาจ เพิ่ม ความสับสนแทนที่จะทำให้การค้นหาการ์ดที่พวกเขาต้องการทำได้ง่ายขึ้น.

ดูเหมือนว่าการเปลี่ยนแปลงอัลกอริธึมการค้นหาจะส่งผลต่อประสบการณ์ของผู้ใช้ในการหาความรู้ใน Guru. คุณทดสอบการเปลี่ยนแปลงที่เป็นไปได้เพื่อดูผลกระทบที่พวกเขาจะมีได้อย่างไร? คุณตัดสินใจที่จะปล่อยมันจริง (หรือไม่)?

เยฟ: คำถามที่ยอดเยี่ยม! ที่ Guru เราให้ความสำคัญกับวัฒนธรรมของการทดลอง และกลุ่มค้นหาที่น่าอัศจรรย์ของเราได้สร้างกรอบการทดลองการค้นหาที่ช่วยให้เราสามารถทำการทดสอบการค้นหาได้อย่างรวดเร็วโดยไม่กระทบกับฟังก์ชันการค้นหาที่ใช้งานอยู่. เมื่อเราวิเคราะห์ข้อมูลและยืนยันว่าทฤษฎีที่ทดสอบจริงๆ ส่งผลให้เกิดการปรับปรุง เราจะทดสอบแบบสดที่จำกัดโดยตรงในผลิตภัณฑ์สำหรับทีมและผู้ใช้เพียงบางส่วน. หากการทดสอบชัดเจน เราจะปรับการเปลี่ยนแปลงไปยังลูกค้าของเรา.

ขอบคุณทั้งสองคนที่แชร์ข้อมูลทั้งหมดนี้กับเราในวันนี้! ก่อนที่เราจะไป คุณช่วยบอกเราหน่อยว่าอะไรคือสิ่งถัดไปสำหรับการค้นหาของ Guru?

เยฟ: การปรับปรุงมากมาย!

โนรา: ใช่ มีการปรับปรุงมากมายในอนาคต. ในไตรมาสนี้ เรามีสมาธิในการปรับปรุงประสบการณ์การค้นหาสำหรับการค้นหาที่ยาวนานขึ้น และปีนี้ เรากำลังปรับปรุงการปรับแก้ของอัลกอริธึม. เรายังอัพเกรดระบบของเราเพื่อเพิ่มความเร็วในการทดสอบและปล่อยการเปลี่ยนแปลงให้กับผู้ใช้ของเรา.

เพื่อให้ทันกับการปรับปรุงทีละน้อยของฟังก์ชันการค้นของ Guru โปรดสมัครรับข้อมูลจากบล็อกของเราและติดตามฟีเจอร์ใหม่ที่กำลังจะมาถึง.