Mô hình và nền tảng AI

EnterpriseDB Giới Thiệu “Trí Tuệ Trên Watt” Để Giảm Tiêu Thụ Năng Lượng Của Trí Tuệ Nhân Tạo

mm
Thêm Unite.AI vào các nguồn ưu tiên của bạn trên Google

EnterpriseDB đã thông báo một bộ mới các điểm chuẩn hiệu suất và cải tiến kiến trúc trong nền tảng EDB Postgres AI của mình, giới thiệu những gì nó gọi là một tiêu chuẩn “trí tuệ trên watt” cho trí tuệ nhân tạo doanh nghiệp. Khái niệm này được thiết kế để giải quyết một thách thức ngày càng tăng: làm thế nào để mở rộng các hệ thống trí tuệ nhân tạo mà không có sự tăng tương ứng về tiêu thụ năng lượng và chi phí cơ sở hạ tầng.

Các kết quả mới nhất của công ty cho thấy rằng những lợi ích hiệu suất đáng kể có thể đạt được không phải tại cấp độ mô hình hoặc GPU, mà trong lớp dữ liệu dướipin mỗi tương tác trí tuệ nhân tạo. Bằng cách tối ưu hóa cách dữ liệu được truy xuất, lập chỉ mục và xử lý, EnterpriseDB tuyên bố rằng nó có thể giảm việc sử dụng token, thu hẹp yêu cầu cơ sở hạ tầng và giảm đáng kể lượng khí thải liên quan đến các công việc trí tuệ nhân tạo.

Cải Tiến Hiệu Suất Tập Trung Vào Lớp Dữ Liệu

Thông báo này được hỗ trợ bởi một loạt các điểm chuẩn nổi bật cải tiến về tốc độ và hiệu suất. EnterpriseDB báo cáo rằng nền tảng của mình có thể tăng tốc lập chỉ mục vector trong khi sử dụng ít bộ nhớ hơn so với các phương pháp truyền thống, và giảm tiêu thụ token mà không làm giảm đáng kể chất lượng đầu ra.

Trong thực tế, điều này có nghĩa là các hệ thống trí tuệ nhân tạo có thể hoàn thành cùng một nhiệm vụ với ít bước tính toán hơn. Vì việc tạo token và truy xuất dữ liệu được gắn trực tiếp với việc sử dụng tính toán, những giảm này chuyển thành tiêu thụ năng lượng thấp hơn trên mỗi tương tác.

Công ty cũng chỉ ra những cải tiến rộng rãi trên các công việc phân tích, nơi các hoạt động trên dữ liệu trực tiếp có thể được hoàn thành nhanh chóng hơn. Những lợi ích này không chỉ giới hạn ở các trường hợp sử dụng riêng lẻ mà còn áp dụng trên các môi trường doanh nghiệp nơi trí tuệ nhân tạo, phân tích và hệ thống giao dịch hoạt động đồng thời.

Giảm Cơ Sở Hạ Tầng và Tác Động Khí Thải

Ngoài các cải tiến tại cấp độ công việc, EnterpriseDB đang nhấn mạnh giảm tại cấp độ cơ sở hạ tầng. Trong một tập hợp các triển khai doanh nghiệp, công ty báo cáo rằng nền tảng của mình đã cho phép giảm đáng kể số lõi tính toán cần thiết để chạy các ứng dụng, điều này đã giảm tiêu thụ năng lượng và khí thải liên quan.

Trong một ví dụ liên quan đến môi trường dịch vụ tài chính quy mô lớn, giảm cơ sở hạ tầng đã chuyển thành giảm đáng kể lượng khí thải carbon. Quy mô của những tiết kiệm này nhấn mạnh cách các cải tiến hiệu suất tại lớp cơ sở dữ liệu có thể có tác động hệ thống, đặc biệt là trong các tổ chức vận hành nhiều trung tâm dữ liệu.

Sự tập trung kép vào tối ưu hóa cơ sở hạ tầng và công việc tạo thành nền tảng của khuôn khổ “trí tuệ trên watt”. Ý tưởng không chỉ là làm cho trí tuệ nhân tạo nhanh hơn, mà là làm cho nó cơ bản hiệu quả hơn khi nó mở rộng.

Thử Thách Năng Lượng Tăng Của Trí Tuệ Nhân Tạo và Trung Tâm Dữ Liệu

Tầm quan trọng của những cải tiến này trở nên rõ ràng hơn khi xem xét trên đường cong tăng trưởng của trung tâm dữ liệu. Trí tuệ nhân tạo đang nhanh chóng tăng nhu cầu về tài nguyên tính toán, và cùng với đó, tiêu thụ điện năng.

Cơ quan Năng lượng Quốc tế đã dự đoán rằng nhu cầu điện của trung tâm dữ liệu toàn cầu có thể đạt khoảng 945 terawatt-giờ vào năm 2030, tăng hơn gấp đôi so với mức hiện tại. Các công việc trí tuệ nhân tạo dự kiến sẽ là động lực chính của sự tăng này.

Sự gia tăng này có ý nghĩa môi trường trực tiếp. Trung tâm dữ liệu đã chiếm một phần đáng kể trong tiêu thụ điện năng toàn cầu, và sự mở rộng của chúng đặt áp lực thêm lên cơ sở hạ tầng năng lượng và mục tiêu khí thải. Nếu không có những cải tiến về hiệu suất, chi phí của việc mở rộng trí tuệ nhân tạo có thể vượt xa ngoài các xem xét tài chính.

EnterpriseDB Là Gì và Tại Sao Điều Này Quan Trọng

EnterpriseDB đã lâu được liên kết với các giải pháp PostgreSQL cấp doanh nghiệp, nhưng sự tiến hóa của nó thành một nhà cung cấp nền tảng dữ liệu và trí tuệ nhân tạo phản ánh những thay đổi rộng rãi hơn trong thị trường. Khi các tổ chức tích hợp trí tuệ nhân tạo vào các hoạt động cốt lõi, ranh giới giữa cơ sở dữ liệu và hệ thống trí tuệ nhân tạo đang biến mất.

Nền tảng EDB Postgres AI được thiết kế để hoạt động tại điểm giao nhau đó, kết hợp xử lý giao dịch, phân tích và công việc trí tuệ nhân tạo trong một hệ thống thống nhất. Cách tiếp cận này giảm nhu cầu về nhiều nền tảng chuyên dụng, thường yêu cầu dữ liệu được sao chép và di chuyển giữa các môi trường.

Bằng cách hợp nhất các chức năng này, EnterpriseDB đang định vị mình như một lớp nền tảng cơ bản cho cơ sở hạ tầng trí tuệ nhân tạo. Sự tập trung của nó vào hiệu suất phù hợp với sự nhận thức ngày càng tăng rằng việc mở rộng trí tuệ nhân tạo không chỉ là về việc tăng khả năng, mà là làm như vậy một cách bền vững.

Làm Thế Nào Điều Này So Sánh Với Các Nỗ Lực Ngành Công Nghiệp Khác

Trên toàn ngành, hầu hết các nỗ lực để cải thiện hiệu suất trí tuệ nhân tạo đã tập trung vào tối ưu hóa phần cứng và mô hình. Các nhà sản xuất chip tiếp tục phát triển các bộ xử lý hiệu quả hơn, trong khi các công ty trí tuệ nhân tạo đang làm việc để giảm kích thước và yêu cầu tính toán của các mô hình.

Các nhà cung cấp đám mây cũng đang đầu tư mạnh mẽ vào hiệu suất trung tâm dữ liệu, bao gồm cả các đổi mới về làm mát và tích hợp năng lượng tái tạo. Đồng thời, các nền tảng dữ liệu đang phát triển để hỗ trợ các công việc trí tuệ nhân tạo trực tiếp hơn, thường bằng cách tích hợp tìm kiếm vector và khả năng học máy vào các hệ thống của họ.

Điều phân biệt cách tiếp cận của EnterpriseDB là sự nhấn mạnh vào lớp dữ liệu như một công cụ chính cho hiệu suất. Thay vì cạnh tranh với GPU hoặc kiến trúc mô hình, nó nhắm vào các hoạt động xảy ra trước và xung quanh suy luận, nơi các hiệu suất kém đáng kể có thể tích lũy ở quy mô.

Quan điểm này không thay thế các cải tiến về phần cứng hoặc mô hình mà bổ sung cho chúng. Khi các hệ thống trí tuệ nhân tạo trở nên phức tạp và tự chủ hơn, hiệu suất của cơ sở hạ tầng dữ liệu cơ bản có thể đóng vai trò ngày càng quan trọng trong việc xác định hiệu suất và chi phí tổng thể.

Sự Chuyển Dịch Hướng Đến Đo Lường Hiệu Suất Trí Tuệ Nhân Tạo

Sự giới thiệu của “trí tuệ trên watt” phản ánh một sự thay đổi rộng rãi hơn trong cách các doanh nghiệp có thể đánh giá các hệ thống trí tuệ nhân tạo. Hiệu suất đơn thuần không còn đủ. Các tổ chức đang bắt đầu xem xét lượng năng lượng cần thiết để tạo ra hiệu suất đó và liệu nó có thể được giảm mà không ảnh hưởng đến chất lượng.

Thông báo của EnterpriseDB cho thấy rằng giai đoạn tiếp theo của việc áp dụng trí tuệ nhân tạo sẽ được định hình không chỉ bởi những gì các hệ thống có thể làm, mà bởi cách chúng làm điều đó một cách hiệu quả.

Trong bối cảnh đó, tối ưu hóa lớp dữ liệu không còn là một mối quan tâm thứ yếu. Nó đang trở thành một phần trung tâm của cuộc trò chuyện về tương lai của trí tuệ nhân tạo doanh nghiệp.

Antoine là một nhà lãnh đạo có tầm nhìn và là đối tác sáng lập của Unite.AI, được thúc đẩy bởi niềm đam mê không ngừng nghỉ để định hình và quảng bá tương lai của AI và robot. Là một doanh nhân hàng loạt, ông tin rằng AI sẽ gây ra sự gián đoạn cho xã hội giống như điện, và thường được bắt gặp khi nói về tiềm năng của các công nghệ phá vỡ và AGI.

Là một nhà tương lai học, ông dành để khám phá cách những đổi mới này sẽ định hình thế giới của chúng ta. Ngoài ra, ông là người sáng lập của Securities.io, một nền tảng tập trung vào đầu tư vào các công nghệ tiên tiến đang định nghĩa lại tương lai và thay đổi toàn bộ lĩnh vực.