ผู้นำทางความคิด

ปัญหาการรับผิดชอบที่กระจายของ AI ในสาธารณสุข

mm
เพิ่ม Unite.AI ลงในแหล่งข้อมูลที่คุณต้องการบน Google

ในด้านสาธารณสุข AI ถูกนำไปใช้ในทุกด้าน ตั้งแต่การตัดสินใจทางคลินิกไปจนถึงการบริหารและเงินฝาก แต่หลายองค์กรยังคงไม่มีการจัดการความเสี่ยงและการมอบหมายที่ชัดเจนเพื่อให้แน่ใจว่าเครื่องมือ AI ไม่ทำให้เกิดอันตราย การไม่มีการกำกับดูแลที่มีโครงสร้างทำให้การตัดสินใจที่เกี่ยวข้องกับ AI ถูกทำโดยไม่มีการรับผิดชอบที่ชัดเจน ทำให้องค์กรต่างๆ ตกอยู่ในความเสี่ยงของการละเมิดจริยธรรมและข้อบังคับ

เมื่อไม่มีใครรับผิดชอบต่อการตัดสินใจและการกระทำของ AI จุดบอดจะขยายตัวอย่างรวดเร็ว ผลที่ตามมาของระบบ AI ที่ตัดสินใจโดยไม่มีการกำกับดูแลมีมากมายและกว้างขวาง โดยเฉพาะอย่างยิ่งเมื่อชีวิตของผู้คนอยู่ในความเสี่ยง

ช่องว่างการกำกับดูแล AI ในปัจจุบันคล้ายกับจุดเปลี่ยนในอดีตที่ความก้าวหน้าทางเทคโนโลยีเพิ่มขึ้นเร็วกว่าที่องค์กรสามารถจัดการได้ เราได้ผ่านประสบการณ์นี้ไปแล้วกับการใช้คลาวด์คอมพิวติ้ง: ทีมงานใช้ SaaS, IaaS และ “shadow IT” เพื่อเพิ่มความเร็ว ในขณะที่การกำกับดูแลล้าหลังในเรื่องพื้นฐาน เช่น การจัดประเภทข้อมูล การจัดการตัวตนและการเข้าถึง การกำกับดูแลผู้ขาย การบันทึก/การตรวจสอบ และความชัดเจนของความรับผิดชอบ — ดังนั้นความรับผิดชอบจึงกระจายไปทั่วทีม IT ความมั่นคง การจัดซื้อ และธุรกิจ เรายังได้เห็นเช่นนี้กับการใช้ IT ที่รวดเร็วและการใช้โทรศัพท์มือถือ/BYOD โดยพนักงานนำอุปกรณ์และแอปพลิเคชันใหม่เข้ามาใน môi trườngที่มีการควบคุมก่อนที่องค์กรจะมีนโยบายที่เต็มที่สำหรับการเข้ารหัส การควบคุมจุดสิ้นสุด การตรวจสอบแอปพลิเคชัน และการค้นหาข้อมูล ในแต่ละกรณี การใช้งานนั้นมีเหตุผลและสร้างมูลค่า — แต่การไม่มีการกำหนดความเป็นเจ้าของที่ชัดเจน การควบคุมที่เป็นมาตรฐาน และการกำกับดูแลตลอดวงจรทำให้เกิดความล้มเหลวที่คาดการณ์ได้ บทเรียนสำหรับ AI คือ การกำกับดูแลไม่สามารถเป็นเรื่องรองจากนวัตกรรมได้; มันจะต้องถูกสร้างขึ้นเหมือนโครงสร้างพื้นฐานที่สำคัญ — โดยมีการตัดสินใจที่ชัดเจน การตรวจสอบอย่างต่อเนื่อง และการป้องกันที่บังคับใช้ได้

ปัญหาในการรับผิดชอบที่กระจาย

การนำ AI ไปใช้อย่างรวดเร็วได้ทำให้เกิดช่องว่างในการกำกับดูแลและมาตรฐานความรับผิดชอบ ซึ่งนำไปสู่ช่องว่าง “การรับผิดชอบที่กระจาย” โดยไม่มีหน่วยงานใดๆ ที่รับผิดชอบเมื่อ AI ล้มเหลว

ความรับผิดชอบเป็นปัญหาอยู่แล้วในสาธารณสุข และ AI ได้นำความท้าทายใหม่ๆ มาให้ เครื่องมือ AI ไม่มีเอกลักษณ์ทางกฎหมายที่รู้จัก ซึ่งหมายความว่าไม่สามารถฟ้องร้องหรือประกันภัยได้ และไม่สามารถจ่ายค่าชดเชยทางกฎหมายให้กับเหยื่อได้ ในกระบวนการทางกฎหมาย ความผิดจะต้องถูกโอนไปยังบุคคลหรือองค์กร ไม่ใช่เครื่องมือ

นักวิจัยใน The Lancet ซึ่งเป็นหนังสือวิจัยทางการแพทย์ที่มีชื่อเสียง ได้โต้แย้งว่า “โครงสร้างความรับผิดชอบของสถาบันต้องกระจายความรับผิดชอบจากผู้เชี่ยวชาญด้านสุขภาพไปยังองค์กรที่ออกแบบและใช้เครื่องมือ AI” มันชัดเจนว่าคำถามเกี่ยวกับความรับผิดชอบเหล่านี้จะยังคงอยู่ในอนาคต

สหภาพยุโรปกำลังพยายามแก้ไขปัญหานี้ในระดับภูมิภาค โดยการนำเสนองานทางกฎหมายสองชิ้นหลัก: การกระทำ AI ซึ่งควบคุมการใช้ AI ตามระดับความเสี่ยงและเน้นการรักษาการกำกับดูแลของมนุษย์; และ การกำหนดนี้ความรับผิดชอบ AI ซึ่งกำหนดกฎใหม่ที่ทำให้ผู้คนสามารถขอชดเชยสำหรับอันตรายที่เกิดจาก AI ได้ง่ายขึ้น

แต่การกำกับดูแลเพียงอย่างเดียวไม่สามารถแก้ปัญหาได้ โรงพยาบาลดำเนินงานในเครือข่ายที่ซับซ้อนของซัพพลายเออร์ ผู้เชี่ยวชาญด้านสุขภาพ ผู้บริหาร และทีม IT เมื่อระบบ AI สร้างผลลัพธ์ที่เป็นอันตรายหรือมีอคติ ความรับผิดชอบจะถูกส่งต่อไปยังผู้มีส่วนได้ส่วนเสีย: ซัพพลายเออร์อาจชี้ให้เห็นว่าการใช้งานที่ไม่เหมาะสม ผู้เชี่ยวชาญด้านสุขภาพอาจบอกว่าดีไซน์มีข้อบกพร่อง และผู้นำอาจกล่าวหาว่าข้อบังคับไม่ชัดเจน

สิ่งนี้ทำให้ความรับผิดชอบกระจายออกไป ทำให้โรงพยาบาลตกอยู่ในความเสี่ยงของการป้องกันทางกฎหมายครั้งใหญ่

ขั้นตอนปฏิบัติในการปิดช่องว่างการกำกับดูแล

ข่าวดีคือ แม้ว่าจะไม่มีการกำกับดูแลที่ครอบคลุม องค์กรสาธารณสุขสามารถปิดช่องว่างการกำกับดูแล AI ได้ด้วยตนเอง โดยเริ่มต้นจากรายงานขององค์การอนามัยโลก ” จริยธรรมและการกำกับดูแล AI สำหรับสุขภาพ” ซึ่งมีจุดมุ่งหมายเพื่อเพิ่มประสิทธิภาพของ AI ในขณะเดียวกันก็ลดความเสี่ยง

ขั้นตอนที่อธิบายไว้ในรายงานนี้มีจุดมุ่งหมายเพื่อปกป้องความเป็นอิสระ ส่งเสริมความเป็นอยู่ที่ดีและความปลอดภัยของสาธารณะ รับรองความโปร่งใสและความสามารถในการอธิบาย และส่งเสริมความรับผิดชอบและความรับผิดชอบ เพื่อแก้ไขช่องว่างการกำกับดูแล เรามุ่งเน้นไปที่สองข้อสุดท้าย

นำแนวทางที่เป็นเอกภาพในการกำกับดูแล AI โดยมีการกำกับดูแลจากบนลงล่างโดยคณะกรรมการหรือผู้เชี่ยวชาญ ปัจจุบันหลายองค์กรให้แต่ละฝ่ายใช้ AI ตามที่เห็นสมควร ทำให้ผู้นำไม่สามารถอธิบายได้ว่าองค์กรใช้เครื่องมือเหล่านี้อย่างไรและที่ไหน ความชัดเจนเป็นสิ่งสำคัญ ดังนั้นให้แน่ใจว่าคุณมีรายชื่อเครื่องมือที่ใช้อยู่ที่ไหนและเพื่ออะไร

การกำหนดเส้นความรับผิดชอบที่ชัดเจนในวงจรชีวิตของ AI ก็มีความสำคัญเช่นกัน ซึ่งหมายถึงการกำหนดให้บุคคลหรือฝ่ายใดรับผิดชอบตั้งแต่การซื้อ การตรวจสอบ การใช้งาน การติดตาม และการตอบสนองต่อเหตุการณ์ โรงพยาบาลต้องกำหนดให้ผู้ขายต้องปฏิบัติตามมาตรฐานความโปร่งใสและความสามารถในการตรวจสอบ และให้แน่ใจว่าทีมภายในได้รับการฝึกอบรมให้เข้าใจทั้งความสามารถและข้อจำกัดของระบบ AI

สุดท้าย การกำกับดูแลจะต้องถูกดำเนินการ ไม่ใช่แค่การบันทึกไว้ ให้ฝังการกำกับดูแลลงในกระบวนการทำงานโดยการรวมการประเมินความเสี่ยง AI ลงในกระบวนการซื้อ จัดทำการตรวจสอบการทำงานของ AI อย่างสม่ำเสมอ และสร้างกลไกสำหรับพนักงานแนวหน้าในการรายงานข้อกังวลโดยไม่ต้องมีข้อจำกัด

ในทางปฏิบัติ การปิดช่องว่างการกำกับดูแลไม่ใช่เรื่องของการนำหลักการใหม่ๆ มาใช้ แต่เป็นการบังคับใช้ระเบียบ: มาตรฐานวิธีการนำ AI เข้าสู่องค์กร ระบุว่าใครเป็นเจ้าของมันในแต่ละขั้นตอน และให้แน่ใจว่าประสิทธิภาพของมันถูกตรวจสอบอย่างต่อเนื่อง หากไม่มีระเบียบเหล่านี้ เครื่องมือ AI จะยังคงนำหน้าโครงสร้างที่ออกแบบมาเพื่อรักษาความปลอดภัย

ความเสี่ยงที่ซ่อนอยู่: คุณภาพของข้อมูล

แม้ว่าโครงสร้างความรับผิดชอบจะถูกสร้างขึ้น แต่ความเสี่ยงอีกอย่างที่มักถูกมองข้ามคือความสมบูรณ์ของข้อมูลที่ใช้ในการให้อาหารระบบ AI และวิธีการพัฒนาของระบบเหล่านั้น ระบบ AI ใดๆ ก็เช่นกันจะน่าเชื่อถือเท่ากับข้อมูลที่ใช้ในการฝึกอบรมและเรียนรู้อย่างต่อเนื่อง สภาพแวดล้อมข้อมูลของโรงพยาบาลมีชื่อเสียงในเรื่องการกระจาย การไม่สอดคล้องกัน และช่องว่าง

ระบบบันทึกสุขภาพอิเล็กทรอนิกส์ ระบบภาพ และแพลตฟอร์มการบริหารมักจะทำงานในซิลโล ทำให้เกิดความไม่สอดคล้องกันที่สามารถส่งผลกระทบโดยตรงต่อผลลัพธ์ของ AI ได้ โมเดลที่ฝึกอบรมด้วยชุดข้อมูลที่ไม่สมบูรณ์หรือมีอคติสามารถสร้างคำแนะนำที่มีข้อบกพร่องซึ่งอาจไม่ได้รับการสังเกตจนกว่าจะเกิดอันตรายแล้ว

สิ่งนี้ยังทำให้ “การเปลี่ยนแปลงของโมเดล” ซึ่งเป็นแนวโน้มของโมเดล AI ที่จะเบี่ยงเบนจากคำแนะนำและบริบทเมื่อมีข้อมูลเข้ามาในระบบมากขึ้น เมื่อประชากรผู้ป่วยเปลี่ยนแปลง โพรโทคอลการรักษาใหม่ถูกนำมาใช้ และปัจจัยภายนอกส่งผลกระทบต่อการดำเนินงาน สมมติฐานพื้นฐานของเครื่องมือ AI สามารถเปลี่ยนแปลงได้ หากไม่มีการตรวจสอบและปรับเทียบใหม่อย่างต่อเนื่อง ระบบ AI ที่ทำงานได้ดีในตอนแรกอาจเริ่มดำเนินการหรือแนะนำวิธีแก้ปัญหาที่ไม่สอดคล้องกับการฝึกอบรม

เพื่อแก้ไขปัญหาการเปลี่ยนแปลงของโมเดล โรงพยาบาลต้องรักษาเครื่องมือ AI เป็นทรัพย์สินแบบไดนามิกและมีความเสี่ยงสูง ซึ่งหมายถึงการนำการตรวจสอบประสิทธิภาพอย่างต่อเนื่อง การกำหนดเกณฑ์มาตรฐานสำหรับความถูกต้องที่ยอมรับได้ และการกำหนดความเป็นเจ้าของสำหรับการฝึกอบรมและตรวจสอบใหม่ การกำกับดูแลข้อมูลจะต้องได้รับการเสริมสร้างด้วยการปฏิบัติที่เป็นมาตรฐานสำหรับคุณภาพข้อมูล ความสามารถในการแลกเปลี่ยนข้อมูล และการตรวจจับอคติ

หากไม่เผชิญหน้ากับความเสี่ยงที่เกี่ยวข้องกับคุณภาพข้อมูลและความเสี่ยงของโมเดล แม้กระทั่งโครงสร้างการกำกับดูแล AI ที่ดีที่สุดก็จะไม่เพียงพอ สำหรับระบบ AI ในสาธารณสุข ซึ่งเป็นเพียงเท่ากับข้อมูลที่รองรับ การเพิกเฉยต่อความเสี่ยงในระดับนี้จะทำให้เกิดความล้มเหลวของระบบในไม่ช้า

ทำสิ่งที่ถูกต้องก่อนที่จะเริ่ม

AI มีศักยภาพในการเปลี่ยนแปลงสาธารณสุขโดยการปรับปรุงประสิทธิภาพ ความถูกต้อง และผลลัพธ์ของผู้ป่วย แต่หากไม่มีการกำหนดความเสี่ยงที่ชัดเจน ศักยภาพนั้นสามารถกลายเป็นความเสี่ยงได้อย่างรวดเร็ว

โรงพยาบาลไม่สามารถรักษาการกำกับดูแล AI เป็นการออกกำลังกายเพื่อความเป็นไปตามข้อบังคับได้ มันจะต้องถูกมองว่าเป็นลำดับความสำคัญในการดำเนินงาน: ระบุความเป็นเจ้าของ ระบุรูปแบบการกำกับดูแล และประเมินอย่างต่อเนื่อง เนื่องจากในสาธารณสุข เมื่อมีอะไรผิดปกติ ผลที่ตามมาจะแย่กว่าใครที่ผิด

เอร์โรล วิสส์ เข้าร่วม Health-ISAC ในปี 2019 ในตำแหน่ง Chief Security Officer คนแรก และสร้างศูนย์ปฏิบัติการภัยคุกคามที่ตั้งอยู่ที่ออร์แลนโด รัฐฟลอริดา เพื่อให้ข้อมูลภัยคุกคามที่มีความหมายและสามารถดำเนินการได้สำหรับมืออาชีพด้าน IT และ infosec ในภาคส่วนด้านสุขภาพ

เอร์โรล มีประสบการณ์มากกว่า 25 ปี ในด้านความปลอดภัยของข้อมูล โดยเริ่มต้นอาชีพของเขาที่ National Security Agency (NSA) โดยทำการทดสอบการเจาะระบบเครือข่ายที่มีการจำแนกประเภท เขาได้สร้างและดำเนินงาน Global Cyber Intelligence Center ของ Citigroup และเป็น Senior Vice President Executive ของทีม Global Information Security ของ Bank of America