您现在的位置是:热点 >>正文
AMD X3D搞AI居然比打游戏还猛!8核暴打16核 领先达88%
热点6521人已围观
简介据GiggleHD实际测试,AMD X3D处理器在RAG检索增强生成)AI基准测试中展现出远超预期的性能表现,最高领先非X3D芯片达88%。RAG AI通过外部向量数据库检索信息来增强大模型的回答质量 ...
据GiggleHD实际测试,比打AMD X3D处理器在RAG(检索增强生成)AI基准测试中展现出远超预期的游戏性能表现,最高领先非X3D芯片达88%。还猛核暴
RAG AI通过外部向量数据库检索信息来增强大模型的打核达回答质量,与纯LLM推理不同,领先向量搜索的比打大量计算负载落在CPU而非GPU上。
随着Agentic AI工作负载的游戏推进,搜索驱动的还猛核暴任务流越来越多,CPU的打核达延迟瓶颈问题日益突出。
HNSW(分层可导航小世界)搜索算法就是领先典型例子,在GPU执行LLM推理的比打同时,CPU负责图检索,游戏更大的还猛核暴缓存意味着更短的检索时间。
GiggleHD使用开源的打核达X3D RAG基准测试,针对个人PC和小团队单节点场景(约100K-200K向量),领先对AMD锐龙9000X3D系列及多款非X3D芯片进行了实测。


结果显示,在100K向量批量搜索中,X3D CPU最高比非X3D芯片快88%;在200K向量测试中,同为8核的锐龙7 9850X3D比锐龙7 9700X快50%以上,且8核X3D芯片的速度超过了16核的锐龙9 9950X。


索引构建方面,100K向量测试时间缩短50%,200K向量缩短39%,并发RAG吞吐量同样由X3D芯片领跑。


差距较小的项目是TTFT(首Token时间)吞吐量,因为该任务主要依赖GPU而非CPU。

Tags:
相关文章
太平雇主责任险多少钱,中国太平雇主责任险多少钱
热点导读: 太平雇主责任险多少钱,中国太平雇主责任险多少钱?雇主责任险主要是企业为了正常运营并保障企业与员工的利益而设立的,在保险承保的范围内 ...
【热点】
阅读更多汽车玻璃上的胶带残留物怎么清除 如何擦掉玻璃上贴着的胶纸,行业资讯
热点在生活中我们经常会用到各类玻璃制品,例如玻璃窗、玻璃杯、玻璃移门等。玻璃制品兼顾美观与实用,既能够凭借晶莹剔透的外表惹人喜爱,又能够充分利用其坚硬耐用的物理性能。一些艺术玻璃甚至会使玻璃具有更多的图样 ...
【热点】
阅读更多乐福KD荣膺上周东西部最佳 詹皇库里哈登获提名
热点乐福KD荣膺上周东西部最佳 詹皇库里哈登获提名发布时间:2018-02-04 09:29 来源:豫都网 我要投稿[摘要]北京时间11月29日消息,NBA官方宣布,骑士队的凯文-乐福和勇士队的凯文-杜兰 ...
【热点】
阅读更多