※ 本文轉寄自 ptt.cc, 文章原始頁面
Re: [情報] AMD 7800XT/7700XT 售價US$449起 9/6上市
AMD的GPU行銷真的是笨死了。每個人都拜託他們出24GB或48GB的卡,這麼簡單就大賣的方法不作。還在搞FSR,難道不知道現在是大AI時代嗎?
7800xtx 24GB,549鎂,還不賣爆。
79x0xtx 48GB,1200鎂,還不搶光。
現在一堆AI inference的需求,欠缺在ram不夠。Training也許還是不行,但inference社群作一堆了,就等你出卡而已。結果你出16GB???
例如最近mlc-llm測試7900xtx 推理可達4090的80%。
https://blog.mlc.ai/2023/08/09/Making-AMD-GPUs-competitive-for-LLM-inference
原作者的中文版
https://zhuanlan.zhihu.com/p/649088095
因為在推理(inference)上gpu的效能已經夠了,是卡在記憶頻寬,所以4090/3090ti/7900xtx效能是大同小異。
https://github.com/ggerganov/llama.cpp
現在4bit 30B模型需要19.5GB記憶體,這個模型好又剛好主流24GB卡可跑,3090二手卡搶爆
4bit 65B模型需要38.5 GB,沒有主流卡可跑,只能用CPU慢慢的推動,等於不能用。
7800xtx 24GB,79x0xtx 48GB。AI社群搶爆,程式幫你寫好。不用在那搞沒用的FSR,沒用的FSR,沒用的FSR<<很重要講三遍
https://i.imgur.com/LeYPRd4.jpg
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 219.70.128.119 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/PC_Shopping/M.1693060246.A.862.html
Re: 回文串
128 則留言
oopFoo 作者的近期文章
Re: [情報] 英特爾認錯…擴大釋單台積 操刀範圍擴及
※ 引述《AquaChen1012 (阿扁)》之銘言: : 英特爾執行長基辛格在法人會議中表示,英特爾晶片代工業務受到決策錯誤的拖累,包括 : 一年前反對使用荷蘭ASML的EUV設備。基辛格說,部分由於這些失誤,英特爾已將晶圓總 : 數的約
Re: [閒聊] 現在橫空出世的NPU
NPU還是很有用的,以後應用會越來越多。 我舉個遊戲應用的例子。 現在遊戲對話都是固定死的。但用現代ai可以活潑很多。我大概解釋一下技術流程。 玩家用語音跟遊戲角色對話。 用Whisper轉換語音到文字。 用bert/gpt來分析文字的情緒
Re: [閒聊] 現在橫空出世的NPU
※ 引述《wahaha99 (我討厭人類)》之銘言: : 以這個評測為例, 讓我有點霧裡看花, 不是很能明白: : Intel Ultra 7 155H : CPU分數 67 : GPU分數 413 : NPU分數 282 : 嗯....這
推
→
→
→
推
→
→
→
→
→
推
→
→
→
→
推
→
推
推
→
→
噓
→
→
→
→
→
噓
→
→
噓
推
→
→
噓
→
噓
→
→
→
→
→
→
噓
→
→
→
→
→