p106吧 关注:27,438贴子:255,295
  • 2回复贴,共1
求助

运行在x8下,只炼丹的话,效率会降多少

只看楼主收藏回复

3400G+A320,看网上说只能运行在x8。
我理解的是PCIe只是数据交换,而推理的话不是权重加载到显存并不释放吗。
那是不是说就只有在加载权重的时候慢一点,后续的推理输入和输出交换的慢一点,推理速度并不会受影响?
对于炼丹来说,是不是性能损失不会很大?


IP属地:河北来自Android客户端1楼2024-11-07 11:51回复
    单纯跑图的话,基本上可以看作没影响


    IP属地:广东来自Android客户端4楼2024-11-07 21:01
    收起回复