关于华为昇腾推理 #570
-
|
我在文档中看到已经支持了torch框架的NPU推理,我有几点疑问,麻烦帮忙解答一下,万分感谢: |
Beta Was this translation helpful? Give feedback.
Replies: 5 comments 1 reply
-
支持的。只要有相关torch模型,都是支持的 |
Beta Was this translation helpful? Give feedback.
-
是的。 |
Beta Was this translation helpful? Give feedback.
-
精度损失涉及到多个方面。一是模型由paddle格式→PyTorch格式有千分之几精度损失。另外就是不同设备对不同算子支持导致的精度损失。 这个建议自行构建评测集,来评估一下。 |
Beta Was this translation helpful? Give feedback.
-
|
好的特别感谢 |
Beta Was this translation helpful? Give feedback.
-
|
onnxruntime-cann貌似只能支持CANN8.2的版本?是这样的吗 |
Beta Was this translation helpful? Give feedback.
精度损失涉及到多个方面。一是模型由paddle格式→PyTorch格式有千分之几精度损失。另外就是不同设备对不同算子支持导致的精度损失。
这个建议自行构建评测集,来评估一下。