邊緣系統VLM視覺理解推論實作工作坊
|
【Arm的AI世界】以ExecuTorch和KleidiAI執行LLM推論 充分釋放行動端AI潛力!
5 月02

【Arm的AI世界】以ExecuTorch和KleidiAI執行LLM推論 充分釋放行動端AI潛力!

受惠於Arm和Meta工程團隊的協作,AI開發人員可在具有i8mm ISA擴展的基於Armv9架構之Arm Cortex-A CPU上部署Llama量化模型,運作速度最高可提升20%;本文將分享更多細節,包括…

Read More
從主控晶片檢視NVIDIA AIPC:DGX Spark、DGX Station
4 月25

從主控晶片檢視NVIDIA AIPC:DGX Spark、DGX Station

DGX Spark是NVIDIA倡議的AIPC參考設計,提供給各品牌系統商以此為基礎再行修改調整而後銷售,而除了DGX Spark外,NVIDIA也發表另一款AIPC參考設計:DGX Station,本篇文章會針對此兩款設計做簡單的介紹。

Read More
【創業小聚】從偷偷闖入牙技所到合作哈佛,Dentscape用AI逆襲牙科產業
4 月24

【創業小聚】從偷偷闖入牙技所到合作哈佛,Dentscape用AI逆襲牙科產業

Dentscape利用AI結合3D技術,推出假牙修復設計軟體,用來縮短牙技師製作假牙的時間。目前,Dentscape已經和哈佛牙醫學院達成合作,並在2024年完成新台幣2,000萬元的Pre-Seed輪募資!

Read More
用OpenVINO GenAI解鎖LLM極速推論:推測式解碼讓AI爆發潛能
4 月23

用OpenVINO GenAI解鎖LLM極速推論:推測式解碼讓AI爆發潛能

借助簡化開發和最佳化硬體利用率的工具,OpenVINO使開發者能夠在各種即時和資源受限的場景中部署高性能的LLM;無論是構建回應迅速的聊天機器人或高效率虛擬助手,還是具備可擴展性的創意應用,OpenVINO正在重新定義AI推論的可能性。本文將探討如何利用OpenVINO GenAI的推測式解碼技術使這一變革性創新成為現實。

Read More
【創業小聚】把1週的工作量縮減到2天,艾鉑金科技的AI「財政簿長」怎麼解放會計師?
4 月21

【創業小聚】把1週的工作量縮減到2天,艾鉑金科技的AI「財政簿長」怎麼解放會計師?

財政簿長AI Buuking是專門給會計師使用的AI SaaS工具,目前最主要的功能是AI記帳,透過AI OCR(光學字元辨識,Optical Character Recognition)技術辨識照片中的紙本發票以及收據,並且自動轉換為傳票格式。

Read More
Hailo在樹莓派上實證LLM技術的語音識別
4 月18

Hailo在樹莓派上實證LLM技術的語音識別

樹莓派公司與Hailo合作,推出Raspberry Pi AI Kit、Raspberry Pi AI HAT+兩款加速模組,只要將加速模組加裝到樹莓派上,即可讓樹莓派電腦獲得AI加速效果。

Read More