ผู้นำทางความคิด

การเชื่อมต่อทีมโครงสร้างพื้นฐานและทีมผลิตภัณฑ์: สิ่งที่เรียนรู้จากการสร้างแพลตฟอร์ม GenAI

mm
เพิ่ม Unite.AI ลงในแหล่งข้อมูลที่คุณต้องการบน Google

ไม่มีข้อสงสัยเกี่ยวกับเรื่องนี้: Generative AI หรือ GenAI เป็นหัวข้อที่ถูกพูดถึงมากที่สุดในช่วงสองสามปีที่ผ่านมา ไม่ว่า 목표จะเป็นการ tự động化กระบวนการ สร้างดีไซน์ผลิตภัณฑ์ใหม่ สร้างเนื้อหา หรือคุณสมบัติอื่นๆ ในโดเมนต่างๆ ตอนนี้เป็นเวลาที่องค์กรต่างๆ ต้องเริ่มทำงานที่สำคัญที่สุดและนำยุทธศาสตร์ GenAI ของตนไปใช้

ความสำเร็จของ GenAI ซึ่งครอบคลุมงานจากงานวิจัยไปจนถึงการฝึกอบรมและการอนุมานขั้นสุดท้าย ขึ้นอยู่กับการประสานงานที่แน่นหนาในการจัดวาง การสังเกตการณ์ การจัดการต้นทุน การสื่อสาร และเป้าหมายความล่าช้าของโครงสร้างพื้นฐานและบริการที่อยู่ด้านล่าง สิ่งเหล่านี้ช่วยขับเคลื่อนระดับประสิทธิภาพที่สามารถทำได้สำหรับงาน AI โดยรับประกันความสมดุลที่มีประสิทธิภาพระหว่างการคำนวณและการสื่อสาร โดยรับประกันว่า GPU มีข้อมูลที่จำเป็นเสมอ

ความท้าทายคือมักจะมีช่องว่างโครงสร้าง: วิศวกรรมโครงสร้างพื้นฐานมุ่งเน้นไปที่สแต็กการคำนวณและการจัดวาง ในขณะที่ทีมซอฟต์แวร์และผลิตภัณฑ์มุ่งเน้นไปที่การสร้างแอปพลิเคชันที่เผยแพร่สู่สาธารณะที่นำ GenAI มาสู่โลกแห่งความเป็นจริง เมื่อกลุ่มเหล่านี้ไม่สอดคล้องกัน มักจะส่งผลให้เกิดความล่าช้าในการส่งมอบ ปัญหาประสิทธิภาพ และปัญหาการใช้งาน

ดังนั้น ช่องว่างนี้ดูเหมือนอย่างไรในโลกแห่งความเป็นจริง และกลยุทธ์ใดที่องค์กรสามารถใช้เพื่อจัดตำแหน่งทีมโครงสร้างพื้นฐานและทีมผลิตภัณฑ์สำหรับความสำเร็จของ GenAI

ปัญหากับการไม่สอดคล้องกัน

เมื่อทีมโครงสร้างพื้นฐานและทีมผลิตภัณฑ์ไม่สอดคล้องกัน อาการมักจะเห็นได้ชัดเจน แต่ไม่ได้รับการแก้ไขอย่างรวดเร็ว enough อาการหนึ่งของทีมที่ไม่สอดคล้องกันคือความไม่สอดคล้องกันเกี่ยวกับการคาดหวังความล่าช้าหรือความสามารถของแบบจำลอง ตัวอย่างเช่น ทีมวิศวกรรมโครงสร้างพื้นฐานอาจวางแผนคุณสมบัติหรือการวางแผนโดยสมมติว่าระดับการแสดงผลที่โครงสร้างพื้นฐานที่ออกแบบจริงไม่ตรงกัน สิ่งนี้นำไปสู่การทำงานใหม่ในระยะหลัง การเปลี่ยนแปลงขอบเขตและการส่งมอบที่ล่าช้า

การไม่สอดคล้องกัน ยังสามารถนำไปสู่ประสิทธิภาพที่ไม่ดีเนื่องจากการวางบนโครงสร้างพื้นฐานที่ไม่ได้รับการปรับให้เหมาะสม ซึ่งแสดงออกมาในความผันผวนของความล่าช้าและปัญหาการปรับขนาดที่ส่งผลต่อประสิทธิภาพของงานฝึกอบรมหรืองานอนุมานที่กระจายอย่างกว้างขวาง ปัญหาด้านความปลอดภัยและความเป็นไปตามกฎระเบียบยังเป็นอาการของการไม่สอดคล้องกันของทีม เนื่องจากการไม่มีการทำงานร่วมกันในระยะแรกระหว่างทั้งสองทีม ทำให้ข้อกำหนดด้านความเป็นส่วนตัวและความเป็นไปตามกฎระเบียบของข้อมูลอาจถูกละเลย

และในที่สุด การไม่สอดคล้องกันของทีมนำไปสู่ประสบการณ์ของผู้ใช้ที่ไม่ดี ซึ่งกระตุ้นให้ทีมวิศวกรรมโครงสร้างพื้นฐานต้องใช้วิธีแก้ปัญหาเมื่อข้อจำกัดไม่ชัดเจน ทำให้การวนซ้ำช้าลงและเพิ่มหนี้สินทางเทคนิค แน่นอนว่าการไม่สอดคล้องกันระหว่างทีมผลิตภัณฑ์และทีมโครงสร้างพื้นฐานอาจมีค่าใช้จ่ายสูงในโครงการซอฟต์แวร์ใดๆ แต่สำหรับ GenAI โดยเฉพาะ ความเสี่ยงมีมากขึ้น – ประสิทธิภาพการทำงานที่ไม่เพิ่มขึ้น การสูญเสียความได้เปรียบในการแข่งขัน และความเสี่ยงด้านความปลอดภัย

สะพานสู่ความสำเร็จ

ความสำเร็จของ GenAI ไม่ขึ้นอยู่กับการมีโครงสร้างพื้นฐานที่แข็งแกร่งเท่านั้น แต่ยังขึ้นอยู่กับการสร้างเฟรมเวิร์กเชิงกลยุทธ์ที่เชื่อมโยงกระบวนการโครงสร้างพื้นฐานและผลิตภัณฑ์ ตัวอย่างเช่น ความคิดของ API การจัดเตรียม GPU ภายในองค์กร สำหรับทีมโครงสร้างพื้นฐาน API เหล่านี้เป็นมาตรฐานการเข้าถึง ลดภาระงานของตั๋ว และรับประกันการปฏิบัติตามกฎระเบียบ สำหรับทีมผลิตภัณฑ์ API เหล่านี้ให้การเข้าถึงที่รวดเร็วและคาดการณ์ได้โดยไม่ต้องรอในคิว ผลลัพธ์คือทั้งสองฝ่ายทำงานจาก “สัญญา” API เดียวกัน โดยกำจัดอุปสรรคและชี้แจงความคาดหวัง

แดชบอร์ดการใช้งานแบบเรียลไทม์มีบทบาทที่คล้ายกัน แดชบอร์ดเหล่านี้ให้ความสามารถในการมองเห็นของวิศวกรโครงสร้างพื้นฐานในการโหลดระบบและประสิทธิภาพ ในขณะที่แสดงให้ทีมผลิตภัณฑ์เห็นว่างานของพวกเขาทำให้เกิดการบริโภคที่แท้จริงได้อย่างไร เนื่องจากทั้งสองฝ่ายเห็นข้อมูลเดียวกัน การอภิปรายเกี่ยวกับการแสดงผลหรืออุปสรรคจึงกลายเป็นความร่วมมือมากกว่าการเป็นปฏิปักษ์ – มีแหล่งที่มาของความจริงเดียว

การปรับขนาดอัตโนมัติ เป็นอีกกลไกที่รวมเข้าด้วยกัน กลไกนี้ช่วยให้วิศวกรโครงสร้างพื้นฐานหลีกเลี่ยงการดับเพลิงอย่างต่อเนื่อง ในขณะเดียวกันก็รับประกันว่าทีมพัฒนาจะไม่ติดหล่มที่เพดานประสิทธิภาพระหว่างการเพิ่มขึ้นของงาน โดยที่อาจเป็นการต่อสู้ระหว่างเสถียรภาพและความคล่องตัว กลายเป็นกลยุทธ์ร่วมกัน: การปรับขนาดจัดการโดยอัตโนมัติ โดยสอดคล้องกับทั้งความยืดหยุ่นในการดำเนินงานและเป้าหมายการแสดงผลของผลิตภัณฑ์

สุดท้าย ความเข้าใจด้านต้นทุนเพิ่มมิติทางการเงินให้กับมุมมองร่วมกัน นี้ ทีมโครงสร้างพื้นฐานสามารถเพิ่มประสิทธิภาพการจัดสรรและให้เหตุผลในการวางแผนความจุ ในขณะที่ทีมผลิตภัณฑ์ได้รับการชื่นชมว่าการเลือกโครงสร้างหรือแบบจำลองของพวกเขาส่งผลต่อการใช้จ่ายอย่างไร ความโปร่งใสนี้ส่งเสริมความรับผิดชอบร่วมกัน โดยเปลี่ยนประสิทธิภาพให้เป็นความรับผิดชอบร่วมกัน แทนที่จะเป็นข้อกังวลที่ซ่อนอยู่

แต่การปรับให้เหมาะสมต้องใช้มากกว่าเครื่องมือที่ใช้ร่วมกัน – ยังต้องใช้การมองเห็นร่วมกัน นี่คือที่ที่แผนงานร่วมกันมีบทบาท: แต่ละทีมจะต้องไม่เพียงแต่เข้าใจเป้าหมายโดยรวมเท่านั้น แต่ยังรวมถึงขั้นตอนที่จำเป็นในการบรรลุเป้าหมายเหล่านั้นด้วย สำหรับโครงสร้างพื้นฐาน สิ่งนี้หมายถึงการมองไปไกลกว่าความเชี่ยวชาญทางเทคนิคที่ลึกซึ้งในฮาร์ดแวร์และซอฟต์แวร์ เพื่อเข้าไปมีส่วนร่วมกับวิธีการที่นักพัฒนาและผู้ใช้สุดท้ายประสบกับระบบจริงๆ สำหรับทีมผลิตภัณฑ์ สิ่งนี้ต้องให้ความเคารพต่อข้อจำกัด เช่น ความล่าช้า ต้นทุน และประสิทธิภาพของแบบจำลอง โดยชื่นชมความเป็นจริงในการดำเนินงานที่ทำให้นวัตกรรมยั่งยืน

สุดท้าย ไม่มีการร่วมมือที่จะคงอยู่ได้โดยไม่มีการมุ่งมั่นร่วมกันต่อความปลอดภัยและความเป็นไปตามกฎระเบียบ ไม่ว่าจะเป็น SOC2, HIPAA, ISO หรือเฟรมเวิร์กอื่นๆ ที่ใช้ขึ้นอยู่กับฐานลูกค้าและแนวตั้งอุตสาหกรรม – แต่ความรับผิดชอบนั้นถูกแบ่งปัน ทั้งทีมโครงสร้างพื้นฐานและทีมผลิตภัณฑ์ต้องรับทราบถึงภาระผูกพันเหล่านี้ โดยตระหนักว่าการปฏิบัติตามกฎระเบียบไม่ใช่การตรวจสอบกล่อง แต่เป็นรากฐานของความไว้วางใจกับผู้ใช้

เมื่อรวมกันแล้ว การปฏิบัติและความคิดเหล่านี้จะรวมโครงสร้างพื้นฐานและผลิตภัณฑ์เข้าด้วยกันเป็นหน่วยที่สอดคล้องกัน โดยมีภาษาที่ใช้ร่วมกัน ความสามารถในการมองเห็นที่ใช้ร่วมกัน และความรับผิดชอบที่ใช้ร่วมกันสำหรับการก้าวหน้า ความยืดหยุ่น และความน่าเชื่อถือ

ทีมที่มีความรู้

การมีคนเหมาะสมมีความสำคัญไม่แพ้กับการมีระบบที่เหมาะสม ทีมควรประกอบด้วยสมาชิกที่รู้จัก GenAI มาแล้ว หรือคนที่มาจากพื้นหลังการประมวลผลประสิทธิภาพสูงและศูนย์ข้อมูลขนาดใหญ่ สิ่งที่สำคัญจริงๆ คือประสบการณ์จริงและบทเรียนที่คุณได้รับมาจากการสร้างและสนับสนุนแพลตฟอร์ม GPU-as-a-service ความเข้าใจว่า GPU พูดกันอย่างไร วิธีการทำงานของการฝึกอบรมที่มีการเชื่อมต่ออย่างใกล้ชิด และความไวต่อความล่าช้า การส่งสัญญาณและการจัดส่งข้อมูล

เมื่อแบบจำลองยังคงเติบโตและการวางแผนขยายขนาด ทีมจะต้องถอยหลังและคิดเกี่ยวกับประสบการณ์ของลูกค้าทั้งหมด มันเริ่มต้นตั้งแต่การวิจัยและทดลองในระยะแรก ไปจนถึงการฝึกอบรมขนาดใหญ่ การปรับให้เหมาะสมและในที่สุดการอนุมาน แต่ละขั้นตอนเหล่านี้ดูแตกต่างกันเล็กน้อย และความต้องการเปลี่ยนแปลงไปตามทาง ที่จริงแล้ว การพัฒนาบทเรียนของแบบจำลองสอนเราอย่างต่อเนื่องเกี่ยวกับโครงสร้างพื้นฐาน กระบวนการทำงาน และความสามารถที่จำเป็นในการรักษาศูนย์ข้อมูล GenAI ให้เหมาะสม

มักจะเกิดปัญหาที่ทีมโครงสร้างพื้นฐานและทีมผลิตภัณฑ์ทำงานในฟองของตนเอง สำหรับบริษัทใดๆ ที่ต้องการขยาย GenAI ไปสู่การผลิต สิ่งนี้ต้องเปลี่ยนแปลง ความสำเร็จขึ้นอยู่กับการทำลายซิลโลเหล่านี้และสร้างความเป็นเจ้าของแพลตฟอร์มที่ใช้ร่วมกัน ด้วยคนเหมาะสม มุมมองที่ชัดเจน และเฟรมเวิร์กที่ใช้ได้จริง ทั้งสองฝ่ายสามารถจัดตำแหน่งบนเล่นบุ๊กเดียวกัน – เล่นบุ๊กที่ช่วยให้พวกเขาเคลื่อนไหวได้เร็วขึ้น รักษาความรับผิดชอบ และส่งมอบการวางแผน GenAI ที่ประสบความสำเร็จในที่สุด

ดรูว์ เพลตเชอร์ เป็น Principal Architect และ Network Engineer ที่ Voltage Park, ซึ่งเขานำการออกแบบโรงงาน AI รุ่นต่อไป รวมถึงศูนย์ข้อมูลขนาดใหญ่ที่ออกแบบมาเพื่อรองรับ AI ทุกรูปแบบ โดยใช้โมเดล AI ที่ทันสมัย เขามุ่งเน้นในการรวมการคำนวณ การเชื่อมต่อเครือข่าย และการเก็บข้อมูลเข้าด้วยกัน เพื่อสร้างระบบที่มีความสามารถในการปรับขนาด ความทนทาน และการใช้พลังงานอย่างมีประสิทธิภาพ ซึ่งช่วยให้โรงงาน AI ของ Voltage Park สามารถทำงานได้ ด้วยประสบการณ์ที่ครอบคลุม Cisco Systems, 3Com และบทบาทผู้นำในฐานะ CTO ของสตาร์ทอัพการซื้อขาย และทำงานอย่างใกล้ชิดกับสภาพแวดล้อม Hyperscale ขนาดใหญ่ที่สุด ดรูว์ได้ออกแบบโซลูชั่นต่างๆ ตั้งแต่โครงสร้างพื้นฐานการซื้อขายความหน่วงต่ำจนถึงแพลตฟอร์ม AI สำหรับการตรวจจับและวิเคราะห์พฤติกรรมของมนุษย์ เขาได้รับการยอมรับในฐานะผู้เชี่ยวชาญระดับโลกด้านการคำนวณประสิทธิภาพสูงและการเชื่อมต่อเครือข่ายความหน่วงต่ำ ซึ่งนำไปสู่การเป็นตัวแทนของ Cisco ในคณะกรรมการที่ปรึกษาทางเทคนิคของ Ferrari Formula 1

ดรูว์ เป็นที่รู้จักในการเชื่อมโยงการวิจัยและพัฒนาแบบล้ำสมัยกับโครงสร้างพื้นฐานการผลิตขนาดใหญ่ ช่วยให้องค์กรต่างๆ สามารถเตรียมพร้อมสำหรับการเปลี่ยนแปลงครั้งถัดไปของการคำนวณ ในปัจจุบัน เขากำลังสร้างแบบจำลองสำหรับศูนย์ข้อมูล AI ในอนาคต ซึ่งประสิทธิภาพ การทำงานอัตโนมัติ และความยั่งยืนจะมาบรรจบกัน