ผู้นำทางความคิด

การคิดใหม่เกี่ยวกับเครื่องมือป้องกันสำหรับการใช้งาน AI

mm
เพิ่ม Unite.AI ลงในแหล่งข้อมูลที่คุณต้องการบน Google

เมื่อ การประยุกต์ใช้ AI ขยายไปไกลกว่าแค่ชัตบอทแบบง่ายๆ ไปสู่ระบบที่สามารถดำเนินการแทนผู้ใช้ได้ ความเสี่ยงก็เพิ่มขึ้นอย่างมาก ระบบที่สามารถดำเนินการแทนผู้ใช้สามารถดำเนินการผ่านเครื่องมือต่างๆ ได้ และเปิดช่องทางใหม่ๆ ให้กับผู้โจมตีที่สามารถหลอกลวงเครื่องมือเหล่านั้นเพื่อเปลี่ยนสถานะของแอปพลิเคชันและข้อมูลของผู้ใช้

รูปแบบการป้องกันและแบบจำลองความปลอดภัยแบบดั้งเดิมถูกออกแบบมาเพื่อรับมือกับความเสี่ยงแบบแคบและจำกัด แต่พวกมันประสบปัญหาในการปรับขนาดต่อเทคนิคการโจมตีที่หลากหลายและสร้างสรรค์ในปัจจุบัน สิ่งนี้ต้องการการเปลี่ยนแปลงแบบจากระดับพื้นฐาน: การใช้ AI เพื่อป้องกัน AI โดยการสร้างเครื่องมือป้องกันที่สามารถปรับขนาดและตอบสนองต่อภัยคุกคามที่หลากหลายและไม่คาดคิด

การเข้าใจความเสี่ยงที่เพิ่มขึ้น

AI กำลังแพร่กระจายไปทุกชั้นของซอฟต์แวร์ – ตั้งแต่ CRM ไปจนถึงปฏิทิน อีเมล์ วอร์กโฟลว์ เบราว์เซอร์ และอื่นๆ – โดยฝังตัวความฉลาดทุกที่ สิ่งที่เริ่มต้นจากผู้ช่วยสนทนาแบบง่ายๆ ตอนนี้กลายเป็นตัวแทนอิสระที่สามารถดำเนินการอิสระได้

ตัวอย่างเช่น ตัวแทน “เอเจนต์” ของ OpenAI ที่เกิดใหม่ซึ่งสามารถท่องอินเทอร์เน็ตหรือดำเนินการออนไลน์ได้ ความสามารถเหล่านี้ปลดล็อกผลผลิตที่มากขึ้น แต่ก็เปิดเผยพื้นที่โจมตีที่ไม่เคยสำรวจมาก่อน ความเสี่ยงไม่เพียงแต่การรั่วไหลของข้อมูลเท่านั้น แต่ยังรวมถึงการควบคุมพฤติกรรม การหลบหลีกแบบจำลอง และการโจมตีแบบฉีดคำสั่ง – ภัยคุกคามที่พัฒนาได้อย่างรวดเร็วและโจมตีตรรกะของแบบจำลองมากกว่าโครงสร้างพื้นฐาน

สำหรับองค์กร นี่หมายถึงความปลอดภัยที่ต้องพัฒนาเร็วเท่ากับ AI เอง ความท้าทายสำหรับผู้นำด้านเทคโนโลยีและความปลอดภัยคือการค้นหาวิธีป้องกันนวัตกรรมโดยไม่ทำให้การเติบโตชะลอลง สิ่งนี้เป็นความตึงเครียดที่มีอยู่ระหว่างทีมความปลอดภัยและทีมพัฒนา AI มานานแล้ว

ที่ที่เครื่องมือป้องกันแบบดั้งเดิมล้มเหลว

เครื่องมือความปลอดภัย AI ส่วนใหญ่ยังคงพึ่งพาแบบจำลองการเรียนรู้ของเครื่องแบบคงที่และแคบๆ ที่ออกแบบมาเพื่อรับรู้ประเภทการโจมตีเฉพาะๆ แต่ละวิธีการหลบหลีกหรือการโจมตีแบบฉีดคำสั่งใหม่ๆ มักต้องการการฝึกอบรมหรือปรับใช้แบบจำลองที่อุทิศให้การป้องกันแบบนั้นโดยเฉพาะ การป้องกันเชิงรับแบบนี้สมมติว่าผู้โจมตีจะดำเนินการในลักษณะที่คาดการณ์ได้ แต่ความจริงแล้วผู้โจมตีใช้ AI เองในการสร้างภัยคุกคามที่ปรับเปลี่ยนได้ สร้างสรรค์ และเคลื่อนไหวเร็ว ซึ่งการป้องกันแบบดั้งเดิมไม่สามารถคาดการณ์ได้

แม้เครื่องมือป้องกันที่ถูกมองว่าเป็นรัฐของศิลปะก็ตาม แต่ก็มีข้อจำกัดในขอบเขตและความสามารถ โดยมีประสิทธิภาพเฉพาะในสถานการณ์ที่ถูกออกแบบมาเท่านั้น แบบจำลองเก่าๆ ต้องการการฝึกอบรมแบบจำลองแยกสำหรับการโจมตีใหม่ๆ ซึ่งเป็นแนวทางที่เปราะบางและไม่ยั่งยืนเมื่อเทคนิคการโจมตีที่อาจถูกเอาเปรียบเพิ่มขึ้นเป็นร้อยๆ

นอกจากนี้ยังมีความไม่ลงรอยกันทางวัฒนธรรมระหว่างทีมความปลอดภัยและทีม AI นักพัฒนา AI มักมองว่าความปลอดภัยเป็นอุปสรรค – สิ่งที่ชะลอความเร็วของพวกเขา – ในขณะที่ทีมความปลอดภัยต้องรับผิดชอบหากมีอะไรผิดพลาด การขาดการทำงานร่วมกันนี้ทำให้หลายองค์กรอ่อนแอโดยการออกแบบ สิ่งที่ต้องการคือการป้องกันที่รวมเข้ากับวงจรชีวิตของ AI อย่างไม่มีเงื่อนไข โดยให้การดูแลโดยไม่มีการขัดขวาง

การพลิกสคริปต์: การใช้ AI เพื่อป้องกัน AI

เพื่อตอบสนองต่อความท้าทายเหล่านี้ รูปแบบการป้องกันใหม่กำลังเกิดขึ้น: AI ที่โจมตี AI ที่เป็นอันตรายและปกป้อง AI ของคุณ แทนที่จะพึ่งพากฎเกณฑ์คงที่หรือลายเซ็นแบบ手工 การป้องกันนี้ใช้พลังการสร้างสรรค์และการวิเคราะห์ของแบบจำลองภาษาขนาดใหญ่ (LLM) เพื่อทดสอบและปกป้องระบบ AI

  • การโจมตีแบบ AI: LLM สามารถจำลองพฤติกรรมของฝ่ายตรงข้ามได้ รวมถึงการหลบหลีกแบบจำลอง การฉีดคำสั่ง และการละเมิดตัวแทน โดยการปล่อยตัวแบบจำลอง “ไม่สอดคล้องกัน” หรือ “โหดเหี้ยม” เพื่อทดสอบแอปพลิเคชันอย่างสร้างสรรค์ องค์กรสามารถเข้าใจถึงจุดอ่อนที่แท้จริงก่อนที่ผู้โจมตีจะใช้ประโยชน์จากมัน
  • การป้องกันที่ปรับเปลี่ยนได้และต่อเนื่อง: ระบบ AI เหล่านี้สามารถฝึกให้เรียนรู้จากแต่ละการโจมตีและเสริมสร้างการป้องกันโดยอัตโนมัติ แทนที่จะจัดการแบบจำลองหลายร้อยแบบที่มีขอบเขตแคบ องค์กรสามารถใช้การป้องกันระดับเดียวที่สามารถรับรู้และปรับเปลี่ยนต่อภัยคุกคามที่หลากหลายได้ ในขณะเดียวกันก็รักษาความหน่วงและประสิทธิภาพให้คงที่

สิ่งนี้แสดงถึงการเปลี่ยนแปลงพื้นฐานจากการทดสอบแบบจุดๆ ไปสู่การป้องกันที่มีชีวิตซึ่งพัฒนาไปพร้อมกับระบบที่มันป้องกัน

การสร้างระบบป้องกันที่สามารถป้องกันตัวเอง

AI ที่ป้องกัน AI ไม่เพียงแต่ปรับปรุงการตรวจจับเท่านั้น แต่ยังเปลี่ยนแปลงทั้งรูปแบบการป้องกัน เมื่อผสมผสานอย่างเหมาะสม ระบบเหล่านี้สามารถ:

  • ปรับขนาดการป้องกันโดยไม่ต้องพยายามครอบคลุมหลายๆ ประเภทการโจมตี
  • ปรับปรุงตัวเองอย่างต่อเนื่องเมื่อพบภัยคุกคามใหม่ๆ ในการผลิต
  • เชื่อมช่องว่างระหว่างทีม AI และทีมความปลอดภัย โดยให้การดูแลที่ไม่ขัดขวางนวัตกรรม
  • ให้ความเข้าใจที่ลึกซึ้งยิ่งขึ้นเกี่ยวกับพื้นที่ความเสี่ยงที่ซับซ้อนซึ่งถูกนำเข้ามาโดยพฤติกรรมของตัวแทน

เป้าหมายคือการสร้างระบบความปลอดภัยที่คิดเหมือนผู้โจมตี คาดการณ์การเคลื่อนไหวของพวกเขา และพัฒนาเร็วเท่าๆ กับพวกเขา

การเรียกให้มีจิตวิญญาณที่ปรับเปลี่ยนได้

อุตสาหกรรมอยู่ที่จุดเปลี่ยนหลังจากความตื่นเต้นเริ่มแรกในปี 2023-2024 หลายๆ โครงการ AI ขององค์กรต่างๆ ถูกขัดขวางเมื่อพวกมันเข้าสู่การผลิตที่มีแรงต้าน นั่นไม่ใช่เพราะการขาดศักยภาพ แต่เพราะโครงสร้างพื้นฐานและรูปแบบการป้องกันไม่สามารถตามทัน ความเสี่ยงของการออกแบบที่ไม่ปลอดภัยจะเพิ่มขึ้นเมื่อ AI ถูกผสมผสานเข้ากับกระบวนการทำงานที่สำคัญ

องค์กรต่างๆ ต้องใช้จิตวิญญาณการป้องกันที่ปรับเปลี่ยนได้ โดยที่ระบบ AI ติดตาม ทดสอบ และเสริมสร้างระบบ AI อื่นๆ อย่างต่อเนื่อง สิ่งนี้หมายถึงการฝังตัวเครื่องมือป้องกันที่มีประสิทธิภาพตั้งแต่เริ่มต้น ไม่ใช่การเพิ่มเข้ามาในภายหลัง มันไม่มีเหตุผลที่จะคิดถึงซอฟต์แวร์ที่ไม่ใช่ AI โดยธรรมชาติ และอันตรายที่จะคิดถึง AI ที่ไม่ใช่ปลอดภัยโดยธรรมชาติ

การป้องกัน AI ที่มีชีวิต

AI คือรากฐานใหม่ของซอฟต์แวร์ และเหมือนรากฐานอื่นๆ ความแข็งแกร่งของมันขึ้นอยู่กับว่ามันสามารถทนต่อความเครียดได้ดีเท่าใด การป้องกันแบบคงที่ไม่สามารถตอบสนองต่อความต้องการได้ ยุคการป้องกันในอนาคตจะ屬สังกัดระบบที่เรียนรู้ด้วยตนเอง (AI ที่ป้องกัน AI) ที่สามารถจับคู่ความเร็ว ความสร้างสรรค์ และขนาดของภัยคุกคามที่พวกมันเผชิญหน้า โดยการเรียนรู้ให้ AI ป้องกันตัวเองเท่านั้น เราจึงสามารถรักษาความปลอดภัยให้กับอนาคตที่ AI ช่วยสร้างขึ้นได้

กีริช จันทรเสการ์ เป็นหัวหน้าผลิตภัณฑ์ของ Straiker ช่วยให้ บริษัทเติบโตจากศูนย์เป็นหนึ่ง เขาเคยเป็นส่วนหนึ่งของทีมผลิตภัณฑ์ที่ Robust Intelligence (ซึ่งถูก Cisco เข้าซื้อกิจการ) และก่อนหน้านั้นเขาทำงานในบทบาททางเทคนิคทีม Machine Learning ที่ Postmates และ JPMorgan Asset Management