ผู้นำทางความคิด

กับดักการบำรุงรักษา: ทำไมการทดสอบ AI Vibe จึงเป็นอนาคตของ QA

Tal Barmeir
เพิ่ม Unite.AI ลงในแหล่งข้อมูลที่คุณต้องการบน Google
ประเด็นสำคัญการทดสอบความรู้สึกเปลี่ยนการประกันคุณภาพจากการตรวจสอบขั้นตอนตายตัวไปสู่การประเมินความตั้…
ดูเพิ่มเติม
  • การทดสอบความรู้สึกเปลี่ยนการประกันคุณภาพจากการตรวจสอบขั้นตอนตายตัวไปสู่การประเมินความตั้งใจและผลลัพธ์ของผู้ใช้
  • ระบบอัตโนมัติแบบเดิมสร้างกับดักการบำรุงรักษาที่ทำให้การพัฒนาช้าลงด้วยสคริปต์ที่เปราะบาง
  • เอไอสำหรับการประกันคุณภาพต้องก้าวไปไกลกว่าการสร้างสคริปต์ที่แตกหักง่ายไปสู่การเข้าใจความหมายเชิงความหมาย

ปัญญาประดิษฐ์ได้เปลี่ยนแปลงจังหวะการสร้างซอฟต์แวร์ ด้วยเครื่องมืออย่าง GitHub Copilot และ ChatGPT โค้ดสามารถสร้างได้ในเวลาไม่กี่นาทีแทนที่จะใช้เวลาหลายสัปดาห์ และอินเทอร์เฟซเปลี่ยนแปลงเกือบทุกวัน แต่ในระหว่างการเร่งความเร็วครั้งนี้ การประกันคุณภาพ ซึ่งเป็นวิชาที่มีจุดมุ่งหมายเพื่อป้องกันความน่าเชื่อถือ ได้กลายเป็นปัญหาอุดตันสำคัญที่สุดของอุตสาหกรรม สิ่งที่นักพัฒนาซอฟต์แวร์เรียกว่า “การอัตโนมัติ” ในปัจจุบันดูเหมือนจะกลายเป็นงานที่ทำด้วยมือมากขึ้น การทดสอบล้มเหลวไม่ใช่เพราะแอปพลิเคชันพัง แต่เพราะชุดการทดสอบพัง

ปัญหาไม่ได้อยู่ที่เครื่องมือของเรา แต่อยู่ที่สมมติฐานของเรา ในช่วงหลายปีที่ผ่านมา อุตสาหกรรมได้รักษาคุณภาพเป็นแบบฝึกหัดตามขั้นตอน ซึ่งเป็นลำดับของการคลิก ตรวจสอบ และยืนยัน มุมมองนี้มีเหตุผลเมื่อซอฟต์แวร์เคลื่อนที่ช้า แต่ไม่ใช่แล้ว การพัฒนาที่เร็วขึ้นในขณะนี้ต้องการการทดสอบที่สามารถปรับเปลี่ยนได้เร็วเท่ากับโค้ดที่มันคุ้มครอง สิ่งนี้เรียกว่า “การทดสอบ Vibe” ซึ่งเป็นการประกันคุณภาพที่เข้าใจความตั้งใจ ตีความบริบท และตอบสนองต่อการเปลี่ยนแปลงมากกว่าการล้มเหลวภายใต้การเปลี่ยนแปลง

ตัวเลขเน้นย้ำถึงความเร่งด่วน ตลาดการทดสอบซอฟต์แวร์ทั่วโลก เกิน 51.8 พันล้านดอลลาร์สหรัฐฯ ในปี 2023 และคาดว่าจะเติบโต 7% ต่อปีจนถึงปี 2032 ส่วนการอัตโนมัติในการทดสอบซึ่งมีมูลค่า 28.1 พันล้านดอลลาร์สหรัฐฯ ในปี 2023 คาดว่าจะถึง 55.2 พันล้านดอลลาร์สหรัฐฯ ในปี 2028 โดยมีอัตราการเติบโตต่อปี 14.5% แม้ว่าจะมีการลงทุนเหล่านี้ ทีม QA ยังคงติดอยู่ในวงจรที่ทำซ้ำๆ การอัตโนมัติได้สัญญาว่าจะเร็วขึ้น แต่บ่อยครั้งจึงนำไปสู่ความเปราะบาง

การอัตโนมัติที่สัญญาแล้วแต่ไม่สำเร็จ

ทั่วทั้งองค์กร รูปแบบเดียวกันจะเกิดขึ้นซ้ำ ทีมงานใช้เวลาส่วนใหญ่ในการแก้ไขสคริปต์ที่เปราะบางซึ่งล้มเหลวเนื่องจากสาเหตุที่ไม่เกี่ยวข้องกับคุณภาพของผลิตภัณฑ์ การเปลี่ยนแปลงเพียงเล็กน้อยในอินเทอร์เฟซ เช่น การเปลี่ยนชื่อปุ่ม การจัดเรียงใหม่ หรือการเพิ่มขั้นตอน สามารถทำให้การทดสอบหลายร้อยรายการล้มเหลวได้ การแก้ไขแต่ละครั้งสร้างการบำรุงรักษาเพิ่มเติม ซึ่งนำไปสู่การอัตโนมัติที่กลายเป็นสิ่งที่มันพยายามที่จะกำจัด ซึ่งก็คือแรงงานที่ทำซ้ำๆ

การอัตโนมัติแบบขั้นตอนถูกสร้างขึ้นโดยมีสมมติฐานที่ว่าอินเทอร์เฟซจะคงเสถียรและเส้นทางผู้ใช้จะคาดเดาได้ สมมติฐานนี้ไม่ได้รอดพ้นจากการปล่อยตัวแบบต่อเนื่อง การทดสอบ A/B และการปรับให้เหมาะสมแบบเรียลไทม์ ระบบสมัยใหม่ถูกออกแบบให้เปลี่ยนแปลงได้ การทดสอบ QA สามารถตามทันการเปลี่ยนแปลงได้โดยการเรียนรู้ที่จะตีความพฤติกรรมและความหมายมากกว่าการตรวจสอบพิกัดบนหน้าจอ

สิ่งนี้คือ “กับดักการบำรุงรักษา” การอัตโนมัติที่ควรเร่งการพัฒนา แต่จริงๆ แล้วชะลอการทำงานลง เนื่องจากการบำรุงรักษาเพิ่มขึ้นเร็วกว่าค่าที่ได้รับ สิ่งนี้เป็นหนึ่งในความล้มเหลวที่ยิ่งใหญ่ที่สุดของวิศวกรรมซอฟต์แวร์สมัยใหม่

ทำไม AI ที่สร้างขึ้นจึงพลาดจุด

การเพิ่มขึ้นของ AI ที่สร้างขึ้นได้ทำให้หลายคนในอุตสาหกรรมหวังว่าจะมีการช่วยเหลือใกล้ๆ มา แต่ความเป็นจริงนั้นมากกว่าความหวัง ส่วนใหญ่ของ “AI สำหรับ QA” ยังคงอาศัยตรรกะที่เปราะบาง พวกมันสามารถสร้างสคริปต์ได้เร็วกว่ามนุษย์ แต่สคริปต์เหล่านั้นยังคงผูกกับเลคเตอร์และความสัมพันธ์ที่ทำให้พวกมันล้มเหลว ดังนั้นการศึกษาทางวิชาการที่ครอบคลุมแสดงให้เห็นว่า尽管มีความสนใจอย่างกว้างขวางในการทดสอบที่ได้รับการเพิ่มประสิทธิภาพด้วย AI แต่ การนำไปใช้จริงในกลุ่มการทดสอบยังคงมีจำกัด.

ระบบเหล่านี้เร่งการเขียนการทดสอบโดยไม่เปลี่ยนแปลงการประกันคุณภาพ พวกมันสามารถสร้างสคริปต์ Selenium ได้อย่างรวดเร็ว แต่สคริปต์เหล่านั้นก็ยังคงล้มเหลวเมื่อองค์ประกอบ UI เคลื่อนไหวหรือชื่อตัวแปรเปลี่ยนแปลง และแม้ว่าเครื่องมือการทดสอบ AI จะมีอยู่ รวมถึงจากบริษัทที่ผลักดันพื้นที่ไปข้างหน้า การเปลี่ยนแปลงของอุตสาหกรรมในวงกว้างยังไม่เกิดขึ้น ส่วนใหญ่ของโซลูชันยังคงมุ่งเน้นไปที่การสร้างโค้ดมากกว่าการทำความเข้าใจความตั้งใจ

จากสคริปต์ไปสู่สัมมนา

การเปลี่ยนแปลงที่แท้จริงต้องการระบบ AI ที่เข้าใจว่าทำไมการโต้ตอบจึงมีความสำคัญ ไม่ใช่แค่วิธีการดำเนินการ การทดสอบ Vibe ย้ายจากความแม่นยำตามขั้นตอนไปสู่ความเข้าใจเชิงประสบการณ์ ไม่ใช่การตรวจสอบว่า “ปุ่ม A นำไปสู่หน้า B” แต่ประเมินว่า “ผู้ใช้ได้ผลลัพธ์ที่ตั้งใจไว้ แม้ว่าอินเทอร์เฟซจะเปลี่ยนแปลงไปก็ตาม”

เมื่อแอปพลิเคชันธนาคารเปลี่ยนรูปแบบการเข้าสู่ระบบ ชุดการทดสอบแบบดั้งเดิมจะล้มเหลว ในขณะที่ระบบการทดสอบ Vibe จะตระหนักถึงความตั้งใจ จากนั้นจึงค้นหาวิธีใหม่ ตรวจสอบผลลัพธ์ และดำเนินการต่อโดยอัตโนมัติ ความแตกต่างนี้กำหนดว่า QA จะช่วยให้นวัตกรรมเกิดขึ้นหรือขัดขวางมัน

แนวทางนี้ลดความไม่แน่นอน ลดการบำรุงรักษา และทำให้ทีม QA สามารถมุ่งเน้นไปที่การทดสอบแบบสำรวจและคุณสมบัติใหม่ๆ แทนที่จะซ่อมสคริปต์ที่พัง ในระดับที่กว้างขึ้น นี่ไม่ใช่แค่การเปลี่ยนแปลงทางเทคนิค แต่เป็นการเปลี่ยนแปลงทางเศรษฐกิจ

เศรษฐศาสตร์ของความตั้งใจ

ในบริการทางการเงิน ซึ่งมีการอัปเดตด้านกฎระเบียบบ่อยๆ การทดสอบตามความตั้งใจทำให้การตรวจสอบการปฏิบัติตามกฎระเบียบมีความสามารถในการปรับขนาดได้โดยไม่ต้องขยายทีม QA ในลักษณะที่สัดส่วน รายงานคุณภาพโลกจาก Capgemini, Sogeti และ OpenText อธิบายว่า ทีมวิศวกรคุณภาพกำลังหันไปใช้ AI และการอัตโนมัติที่ฉลาดขึ้น เพียงเพื่อให้สามารถตามทันวงจรการปล่อยที่เร็วขึ้นและความซับซ้อนของระบบที่เพิ่มขึ้น

ในอีคอมเมิร์ซ ซึ่งอินเทอร์เฟซเปลี่ยนแปลงอย่างต่อเนื่องผ่านการทดสอบ A/B และการปรับให้เหมาะสม บริษัทที่ใช้แนวทางที่ขับเคลื่อนด้วยความตั้งใจได้ลดเวลาในการบำรุงรักษาการทดสอบลงประมาณ 40% ในช่วงสามเดือน ผู้ให้บริการ SaaS ระดับองค์กรที่จัดการสภาพแวดล้อมในการปล่อยตัวหลายแบบใช้ตรรกะเดียวกันเพื่อรักษาคุณภาพทั่วทั้งรูปแบบต่างๆ โดยไม่ต้องมีการบำรุงรักษาที่มากเกินไป

รูปแบบเหล่านี้แสดงให้เห็นว่าเรากำลังพูดถึงการเปลี่ยนแปลงที่สำคัญ ไม่ใช่แค่การปรับปรุงแบบทีละน้อย

ราวกับดักสำหรับอนาคตอัตโนมัติ

การเปลี่ยนแปลงแบบจุดเปลี่ยนไม่มีอะไรที่ไม่มีข้อจำกัด ระบบที่สร้างและปรับเปลี่ยนตนเองโดยอัตโนมัติยังคงต้องการการดูแลจากมนุษย์ AI สามารถตีความตรรกะโดเมนผิดได้หากไม่ได้รับการฝึกฝนในบริบทที่ถูกต้อง ผู้นำ QA ต้องรักษาการตรวจสอบที่เข้มงวด โดยเฉพาะในภาคส่วนที่มีการควบคุมซึ่งความผิดพลาดมีความเสี่ยงจริงๆ

ความสามารถในการอธิบายและติดตามยังเป็นสิ่งสำคัญอีกด้วย การทดสอบ QA แต่ละครั้งจะต้องบันทึกว่ามันพัฒนาไปอย่างไรและทำไมจึงผ่านหรือล้มเหลว ในภาคธนาคารและประกันภัย ระดับของการตรวจสอบนี้เป็นข้อกำหนดด้านกฎระเบียบ

ระบบอัจฉริยะมีความยอดเยี่ยมในกระแสหลักของผู้ใช้ แต่สามารถพลาดกรณีที่หายากหรือมีความเสี่ยงสูงได้ ความเสี่ยงด้านความปลอดภัย กรณีการปฏิบัติตามกฎระเบียบ และกรณีเชิงขอบของความสมบูรณ์ของข้อมูลยังคงต้องการการทดสอบที่สร้างโดยมนุษย์และความเชี่ยวชาญด้านโดเมนอย่างลึกซึ้ง และความต้านทานทางวัฒนธรรมยังคงมีอยู่ ทีมที่มีประสบการณ์ในการทำงานกับ Selenium หรือ Cypress จะไม่เปลี่ยนไปในทันที การเปลี่ยนแปลงต้องมีการลงทุนในการฝึกอบรม การจัดการการเปลี่ยนแปลง และการแสดงคุณค่าที่ชัดเจน

การเปลี่ยนแปลงไปสู่ QA ที่ปรับให้เหมาะสม

บริษัทที่นำการทดสอบ Vibe ไปใช้อย่างมีประสิทธิภาพมีรูปแบบที่เหมือนกัน พวกเขาจะเริ่มต้นด้วยการนำการทดสอบไปใช้กับพื้นที่ของแอปพลิเคชันที่เปลี่ยนแปลงบ่อยๆ ร่วมกับชุดการทดสอบแบบดั้งเดิม พวกเขาจะวัดผลลัพธ์อย่างรอบคอบ ติดตามชั่วโมงการบำรุงรักษาและอัตราการล้มเหลว และขยายออกไปเฉพาะเมื่อผลลัพธ์แสดงให้เห็นถึงความทนทาน พวกเขาลงทุนในการช่วยให้วิศวกร QA พัฒนาจากผู้เขียนสคริปต์ไปสู่ผู้สร้างแบบจำลองความตั้งใจและผู้กำกับการประกันคุณภาพ มากกว่าการเป็นผู้ดำเนินการ พวกเขาทำการบูรณาการ AI ที่ปรับให้เหมาะสมโดยตรงเข้ากับพายพีนการทำงาน DevOps เพื่อให้การทดสอบปรับเปลี่ยนเมื่อโค้ดเปลี่ยนแปลงแทนการล้มเหลวภายใต้การเปลี่ยนแปลง

บทเรียนที่กว้างขึ้นคือเชิงปรัชญาเช่นเดียวกับเชิงเทคนิค การอัตโนมัติในแบบที่เราได้ปฏิบัติมา ล้วนพยายามกำจัดความไม่แน่นอนผ่านการควบคุม การทดสอบ Vibe ยอมรับว่าการเปลี่ยนแปลงเป็นเรื่องปกติและออกแบบสำหรับมัน มันรักษาการทดสอบไม่เพียงแต่เป็นประตูที่สิ้นสุดการพัฒนา แต่เป็นการพูดคุยที่มีชีวิตระหว่างโค้ด ผู้ใช้ และระบบ ผลลัพธ์คือซอฟต์แวร์ที่พัฒนาโดยไม่สูญเสียความสมบูรณ์

การประกันคุณภาพยืนอยู่ที่จุดแยกทางหนึ่ง เส้นทางหนึ่งนำไปสู่กับดักการบำรุงรักษา ซึ่งสคริปต์จะเพิ่มขึ้นและนวัตกรรมจะหยุดชะงัก อีกเส้นทางหนึ่งนำไปสู่การทดสอบที่ปรับให้เหมาะสมและขับเคลื่อนด้วยความตั้งใจ ซอฟต์แวร์ที่เข้าใจตัวเองเพียงพอที่จะตรวจสอบพฤติกรรมของตนเอง การเลือกจะกำหนดว่าองค์กรใดจะตามทันอนาคตที่เร่งด้วย AI และองค์กรใดจะยังคงติดอยู่กับการแก้ปัญหาของอดีต

ทศวรรษหน้าของ QA จะไม่ถูกวัดจากความสามารถในการอัตโนมัติ แต่จะวัดจากความเข้าใจของเรา และผู้ชนะจะเป็นองค์กรที่สร้างระบบที่รู้สึกถึงจังหวะของผลิตภัณฑ์ ของพวกเขา หรือที่เรียกว่า “Vibe” และปรับตัวให้เหมาะสม

ทัล บาร์เมียร์ เป็นผู้ร่วมก่อตั้งและซีอีโอของ BlinqIO ซึ่งเป็นวิศวกรทดสอบ AI ตัวแรกที่สร้างขึ้นสำหรับระบบอัตโนมัติบน Playwright โดยสามารถสร้าง รัน และดูแลการทดสอบได้ด้วยตนเอง พร้อมนำเสนอ Vibe Testing หรือการตรวจสอบด้วย AI ที่พัฒนาไปพร้อมกับซอฟต์แวร์ที่กำลังทดสอบ

เธอยังร่วมก่อตั้งและเคยเป็นซีอีโอของ Experitest บริษัท SaaS ด้าน DevOps สำหรับธุรกิจ ซึ่งถูก TPG (NASDAQ: TPG) เข้าซื้อกิจการ ก่อนหน้านั้น ทัลดำรงตำแหน่งผู้นำหลายตำแหน่ง รวมถึงที่ Accenture ในลอนดอน (NYSE: ACN) และ Comverse ในอิสราเอล โดยบทบาทของเธอรวมถึงหัวหน้าฝ่ายการตลาดในแผนกบริการและผู้จัดการกลยุทธ์ด้านเทคโนโลยีขั้นสูง