|
認識IPEX-LLM:LLM模型最佳化的PyTorch工具
5 月09

認識IPEX-LLM:LLM模型最佳化的PyTorch工具

IPEX-LLM是英特爾為其 XPU(Xeon/Core/Flex/Arc/PVC)提出的低位元 LLM 開源(Apache 2.0授權)函式庫,是專為 PyTorch 生態打造的LLM執行擴充套件,具有廣泛的模型支援、低延遲和記憶體佔用小等優勢。

Read More
量子國家隊聯手仁寶開發退火運算應用
5 月08

量子國家隊聯手仁寶開發退火運算應用

由國科會補助支持的國立成功大學副教授舒宇宸主持之數位退火研發推動計畫,近日宣佈與仁寶電腦啟動合作,將共同加速開發量子啟發運算的實務應用。

Read More
提升複雜場景辨識力:YOLOv12 向 Transformer 技術靠攏
5 月07

提升複雜場景辨識力:YOLOv12 向 Transformer 技術靠攏

YOLOv12也向Transformer技術靠攏!本文介紹其創新設計技術亮點。

Read More
ADI低功耗AI MCU – MAX78000,適用電池供電環境
5 月07

ADI低功耗AI MCU – MAX78000,適用電池供電環境

Analog Devices(ADI)推出的MAX78000,是一款針對Edge AI應用設計的超低功耗微控制器(Microcontroller Unit, MCU),專為在資源有限的邊緣設備上執行神經網路推論而打造。

Read More
AI程式助手:GitHub Copilot 是什麼?
5 月04

AI程式助手:GitHub Copilot 是什麼?

AI程式助手是一項結合人工智慧與軟體開發的創新工具,無論是加速專案開發、減少錯誤,或作為學習的輔助,都是當代開發者不可忽視的利器。本文介紹熱門的Github Copilot,以及3個類似的工具。

Read More
【Arm的AI世界】以ExecuTorch和KleidiAI執行LLM推論 充分釋放行動端AI潛力!
5 月02

【Arm的AI世界】以ExecuTorch和KleidiAI執行LLM推論 充分釋放行動端AI潛力!

受惠於Arm和Meta工程團隊的協作,AI開發人員可在具有i8mm ISA擴展的基於Armv9架構之Arm Cortex-A CPU上部署Llama量化模型,運作速度最高可提升20%;本文將分享更多細節,包括…

Read More