跳到主要内容
Link - ONNX 运行时
Menu - ONNX 运行时
Expand - ONNX 运行时
(external link) - ONNX 运行时
Document - ONNX 运行时
Search - ONNX 运行时
Copy - ONNX 运行时
Copied - ONNX 运行时
ONNX Runtime
安装 ONNX Runtime
开始使用
Python
C++
C
C#
Java
JavaScript
Web
Node.js 绑定
React Native
Objective-C
Julia 和 Ruby API
Windows
移动端
设备端训练
大模型训练
教程
API 基础
加速 PyTorch
PyTorch 推理
在多个目标平台上推理
加速 PyTorch 训练
加速 TensorFlow
加速 Hugging Face
部署到 AzureML
部署到移动端
使用 YOLOv8 进行目标检测和姿态估计
Android 移动端图像识别
提升移动端图像分辨率
iOS 移动端物体检测
ORT 移动模型导出助手
Web
使用 ONNX Runtime 构建 Web 应用
'env' 标志和会话选项
使用 WebGPU
使用 WebNN
使用大型模型
性能诊断
部署 ONNX Runtime Web
问题排查
使用 ONNX Runtime 和 Next.js 对图像进行分类
JavaScript 中用于 BERT 任务的自定义 Excel 函数
部署到 IoT 和边缘
在 Raspberry Pi 上部署 IoT
部署传统机器学习
使用 C# 进行推理
C# 基础教程
使用 C# 进行 BERT NLP 推理
使用 C# 配置 GPU 的 CUDA
使用 C# 和 ResNet50v2 进行图像识别
使用 C# 进行 Stable Diffusion
使用 C# 和 OpenVINO 进行目标检测
使用 C# 和 Faster RCNN 进行目标检测
设备端训练
构建 Android 应用程序
构建 iOS 应用程序
API 文档
构建 ONNX Runtime
为推理构建
为训练构建
使用不同的 EP 构建
为 Web 构建
为 Android 构建
为 iOS 构建
自定义构建
生成 API (预览)
教程
Phi-3.5 vision 教程
Phi-3 教程
Phi-2 教程
使用 LoRA 适配器运行
DeepSeek-R1-Distill 教程
在 Snapdragon 设备上运行
API 文档
Python API
C# API
C API
Java API
如何
安装
从源代码构建
构建模型
为 Snapdragon 构建模型
故障排除
迁移
参考
配置参考
适配器文件规范
执行提供程序
NVIDIA - CUDA
NVIDIA - TensorRT
Intel - OpenVINO™
Intel - oneDNN
Windows - DirectML
Qualcomm - QNN
Android - NNAPI
Apple - CoreML
XNNPACK
AMD - ROCm
AMD - MIGraphX
AMD - Vitis AI
云 - Azure
社区维护
Arm - ACL
Arm - Arm NN
Apache - TVM
Rockchip - RKNPU
Huawei - CANN
添加新的提供程序
EP 上下文设计
扩展
添加运算符
构建
性能
调优性能
性能分析工具
日志记录 & 跟踪
内存消耗
线程管理
I/O 绑定
问题排查
模型优化
量化 ONNX 模型
Float16 和混合精度模型
图优化
ORT 模型格式
ORT 模型格式运行时优化
Transformers 优化器
使用 Olive 进行端到端优化
设备张量
生态系统
用于 PyTorch 的 Azure 容器 (ACPT)
参考
发布
兼容性
运算符
运算符内核
Contrib 运算符
自定义运算符
缩减的运算符配置文件
架构
引用 ONNX Runtime
ONNX Runtime 中的依赖管理
GitHub 上的 ONNX Runtime 文档
ONNX Runtime
安装
开始使用
教程
API 文档
YouTube
GitHub
开始使用
移动端
ONNX Runtime 移动端入门
ORT Mobile 允许你在移动设备 (iOS 和 Android) 上运行模型推理。
参考
安装 ONNX Runtime Mobile
教程:部署到移动端
从源代码构建:
Android
/
iOS
ORT 移动端运算符
模型导出助手
ORT 格式模型运行时优化