[新聞] 在智慧型手機上運行生成式AI的趨勢將在2024年實踐

1.原文連結：連結過長者請使用短網址。 https://bit.ly/3YVVYMf 2.原文標題：標題須完整寫出且須符合內文(否則依板規刪除並水桶)。 在智慧型手機上運行生成式AI的趨勢將在2024年實踐 3.原文來源(媒體/作者)：例:蘋果日報/王大明(若無署名作者則不須) 科技產業資訊室 / 茋郁 4.原文內容：請刊登完整全文(否則依板規刪除並水桶)。 借助生成式AI，智慧型手機可以成為人們真正的數位助理。用戶可以使用它自動閱讀或撰 寫電子郵件、起草文檔和創建演講文稿。AI驅動的座艙將使駕駛員和乘客能夠更自然地互 動和控制娛樂、導航和車輛功能，從而創造更加個性化和直觀的體驗。 不過，AI的討論主要集中在雲端上。ChatGPT使用大量的處理、儲存和記憶體。到目前為 止，大部分重點都集中在訓練和完善新模型上，這些模型通常在雲端進行。 但從2024年開始，三星和OnePlus的全新手機可以運行由Meta對ChatGPT的解決方案提供支 持的生成式AI應用程式，這是屬於On-Device AI。Meta已與智慧型手機晶片商高通和聯發 科技建立了單獨的合作夥伴關係，以使其升級成為現實。 聯發科技於2023年8月23日透露，將發布一款利用Meta生成式AI系統Llama 2大語言模型（ LLM），為其下一代旗艦晶片組天璣9300帶來裝置上的生成式AI功能。其實，高通公 司也在2023年 7月宣布與Meta建立類似的合作夥伴關係。 目前，像ChatGPT這樣需要大量數據的生成式AI工具的運行成本極高，因為它們需要依賴 於遠程雲端伺服器。一旦將生成式AI在手機上本地運行，這將有助於降低開發人員的經濟 成本，進而可以為用戶帶來大量新的應用程式和服務。 Meta正試圖通過免費贈送代碼來鼓勵開發人員使用其AI大語言模型。一些專家警告說，這 種自由放任的做法可能會導致不良行為者利用該技術達到邪惡目的。 對於普通公眾來說，最終結果可以提供量身客製化的個人助理，根據您的興趣、網路活動 、健身數據、位置甚至您說話的方式提供建議和提示。這些所謂的AI代理將有各種不同的 性格供你與之互動。而且，由於這些新服務將在您的手機上運行，因此理論上您的數 據將比在雲端上的數據更加隱密和安全。最後，更廣泛的好處將是減少能源消耗。 眾所周知，維持聊天機器人運行的數據中心需要大量的水來冷卻。事實上，研究人員最近 發現，訓練ChatGPT至少消耗了70萬公升水，而與機器人的平均對話相當於打翻了500毫升 的瓶子。 從整體發展趨勢來看，Meta並不是唯一一家致力於將生成式AI引入智慧型手機的公司。谷 歌最近宣布，它成功地在行動裝置上運行了其最新大型語言模型PaLM 2的輕量級版本，這 也為將來On-Device AI帶來了契機。 5.心得/評論：內容須超過繁體中文30字(不含標點符號)。 隨著生成式 AI 的處理需求、使用案例和使用者增加，在裝置上執行的 AI（On-device AI）將在讓生成式 AI 在各個應用程式和產業中擴展，並擴展到更多邊緣裝置中，扮演不 可或缺的角色。在裝置上啟用生成式 AI 將有助於在任何地方加速採用，並減少雲端基礎 設施成本的上升。 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 203.145.192.245 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/MobileComm/M.1693455476.A.EBB.html