Document

端侧模型部署与调优指南

AI 开发工具链 · 开发指南

端侧模型部署与调优指南

覆盖 MindSpore、飞桨、PyTorch、TensorFlow 等主流框架模型部署流程。

MindSpore飞桨PyTorchTensorFlow
适用产品
统一模型推理平台
文档版本
v1.0
更新时间
2026/07/09

Overview

文档概览

覆盖 MindSpore、飞桨、PyTorch、TensorFlow 等主流框架模型部署流程。

文档类型开发指南
适用产品统一模型推理平台
当前版本v1.0

Before You Start

准备工作

  • 明确模型来源与框架版本
  • 准备基准输入输出
  • 确认目标硬件资源
01

模型与环境检查

确认框架、算子、输入输出和目标环境。

  1. 1
    记录模型信息

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

  2. 2
    检查算子支持

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

  3. 3
    准备精度基线

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

02

转换与推理配置

完成模型转换、运行参数和推理接口配置。

  1. 1
    设置输入规格

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

  2. 2
    选择优化策略

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

  3. 3
    运行推理验证

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

03

精度与性能调优

从数据、算子和运行配置定位问题。

  1. 1
    对比输出精度

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

  2. 2
    分析运行耗时

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

  3. 3
    记录稳定配置

    根据目标硬件、系统版本与项目环境完成检查,并记录关键配置与结果。

这篇文档是否解决了你的问题?

遇到产品、系统、模型或机器人开发问题,可通过支持入口获得帮助。