N環球 N GLOBE
Quốc tế · Công nghệ

BrainChip ra mắt IP bộ xử lý Sequora để chạy Generative AI trên các thiết bị Edge chạy bằng pin

· N GLOBE

Lõi IP bộ xử lý Sequora của BrainChip, được phát hành vào ngày 21 tháng 10, mang AI và LLM tổng hợp đến các thiết bị biên chạy bằng pin như tai nghe nhét tai và nút cảm biến, với yêu cầu bộ nhớ liên tục nhờ tối ưu hóa mô hình không gian trạng thái. Bây giờ có sẵn để cấp phép.

Tại sao nó quan trọng

Chiến trường tiếp theo trong lĩnh vực AI biên đang hoạt động mà không cần đám mây. BrainChip đã công bố vào ngày 21 tháng 10 về việc phát hành lõi IP của bộ xử lý Sequora, cho phép AI tổng hợp và các mô hình ngôn ngữ lớn chạy trực tiếp trên các thiết bị biên chạy bằng pin như tai nghe nhét tai và nút cảm biến — từ suy luận LLM trên thiết bị và tương tác giọng nói với các tác nhân AI, tất cả đều cục bộ, không có dữ liệu nào được gửi lên đám mây, cải thiện quyền riêng tư và độ trễ.

Sequora bổ sung cho IP bộ xử lý thần kinh Akida hiện có của công ty: Akida xử lý dữ liệu cảm biến truyền trực tuyến (rung, âm thanh, radar, IQ RF thô, tín hiệu sinh học) trong khi Sequora đảm nhận các nhiệm vụ AI tổng hợp và tuần tự.

Báo cáo đầy đủ

Đặt cược kỹ thuật quan trọng là tối ưu hóa cho các mô hình không gian trạng thái (SSM), duy trì trạng thái có kích thước cố định để thể hiện lịch sử đầu vào, giữ cho yêu cầu bộ nhớ không đổi bất kể độ dài chuỗi - phù hợp với khối lượng công việc AI tổng hợp trên các thiết bị bị hạn chế về tài nguyên.

Sequora sử dụng mảng tích lũy nhân (MAC) thống nhất cho cả xử lý tín hiệu và tính toán mạng thần kinh, loại bỏ nhu cầu về giai đoạn tiền xử lý DSP riêng biệt và kiến ​​trúc bộ lệnh của nó cho phép triển khai các thuật toán mới thông qua các bản cập nhật phần mềm.

IP hiện có sẵn để cấp phép: mã RTL có thể di chuyển theo quy trình, có thể tổng hợp đầy đủ bao gồm IP xác minh, điểm kiểm tra, tập lệnh tổng hợp và ràng buộc về thời gian, cùng với SDK với trình biên dịch biểu đồ tĩnh, thư viện thời gian chạy C++ và vườn thú mô hình. Khách hàng tích hợp nó vào hệ thống trên chip của riêng họ và sản xuất tại nút đúc và xử lý mà họ lựa chọn.

Giám đốc điều hành Sean Hehir cho biết: "Khách hàng không chỉ yêu cầu một bộ phân loại tín hiệu hoặc một mô hình ngôn ngữ. Họ muốn cả hai, trong cùng một sản phẩm, trên cùng một loại pin."

Sự ra mắt này phản ánh một xu hướng trong ngành: nút thắt cổ chai phần cứng AI đã chuyển từ logic hàng đầu xuống các nút trưởng thành, đồng thời băng thông bộ nhớ và chi phí đã trở thành rào cản đối với các mô hình tổng quát. Chạy các mô hình biên với bộ nhớ không đổi là một hướng mới để giảm chi phí trên mỗi từ.

💬 Comments

No comments yet. Be the first!