【Edge AI專欄】AI Maker世代即將展開 – 大家跟上了嗎？
這一年來，遠在天邊（雲端）的技術迅速落地（邊緣），高階手機(Mobile)、單板微電腦(SBC)甚至高階單晶片(MCU)也有機會玩AIGC相關應用，這似乎意味著「AI Maker世代」即將到來。本篇文章，幫大家整理了有哪些硬體、軟體相關技術資源可用，還有哪些創意、應用可能成為AI Maker的新寵。
【Maker 玩 AI】Grove Vision AI 模組讓 Arduino 也能玩 YOLO 模型
日前 Seeed Studio 推出相同核心的 Grove Vision AI 智慧鏡頭模組，筆者便以行動支持國產晶片入手一片進行測試！本篇文章會介紹如何透過 Grove Vision AI 使Arduino也能玩轉YOLO 模型！
聚焦Edge AI Lattice挾龐大生態系資源拉攏開發社群
對所有相關解決方案供應商來說，正準備起飛的Edge AI市場究竟能不能成氣候，來自開發者們的回饋絕對是不可忽視的寶貴資訊──這或許也是低功耗可程式化設計元件供應商Lattice Semiconductor在2023年首度舉辦「萊迪思開發者大會」(Lattice Developers Conference)的主要原因之一。
AI PC市場大餅浮現，Intel、AMD為開發者做好準備了？
迎接2024的AI PC世代，Intel及AMD都已做好準備，分別提出自己的軟、硬體解決方案，希望拉攏更多開發者在其平台上做出能發揮AIGC、LLM模型的創新應用。
如何利用低位元量化技術進一步提升大模型推論性能
相比運算量的增加，大模型推論速度更容易受到記憶體頻寬的影響，導致算力資源無法得到充分發揮，進而影響性能；低位元量化技術是讓大語言模型(LLM)在部署過程中實現性能需求的最佳方案之一，本文將探討低位元量化技術如何幫助LLM提升性能，以及新版OpenVINO對於低位元量化技術的支援。
活用IPEX和Intel GPU加速大型語言模型訓練效率
以IPEX (Intel-Extension-for-PyTorch)搭配Intel硬體產品，可提供最佳化功能大幅提升運作效能。例如透過PyTorch的
如何客製化企業 RAG 知識庫？— 從資料庫到知識整合的實戰技術
