Alwaysssssss/nndeploy

nndeploy是一款最新上线的支持多平台、简单易用、高性能的机器学习部署框架,一套实现可在多端(云、边、端)完成模型的高性能部署。

C++CMakeObjective-C++PythonOtherhpcdeployyoloeasy-to-usetensorrtmnnopenvinoonnxruntimetnn
This is stars and forks stats for /Alwaysssssss/nndeploy repository. As of 29 Apr, 2024 this repository has 227 stars and 35 forks.

介绍 nndeploy 是一款最新上线的支持多平台、高性能、简单易用的机器学习部署框架。做到一个框架就可完成多端(云、边、端)模型的高性能部署。 作为一个多平台模型部署工具,我们的框架最大的宗旨就是高性能以及使用简单贴心😚,目前 nndeploy 已完成 TensorRT、OpenVINO 、ONNXRuntime、MNN、TNN、ncnn 、coreML、paddle-lite八个业界知名的推理框架的集成,后续会继续接入 TFLite、TVM、OpenPPL、Tengine、AITemplate、RKNN、sophgo、MindSpore-lite、Horizen,在我们的框架下可使用一套代码轻松切换不同的推理后端进行推理,且不用担心部署框架对推理框架的抽象而带来的性能损失。 如果您需要部署自己的模型,目前 nndeploy 只需大概只要 200 行代码就可以完成模型在多端的部署。 同时还提供了高性能的前后处理模板和推理模板,该模板可帮助您简化模型端到端的部署流程。 目前 nndeploy 已完成 YOLO 系列等多个开源模型的部署,可供直接使用,目前我们还在积极部署其它开源模型。(如果您或团队有需要部署的开源模型或者其他部署相关的问题,非常欢迎随时来和我们探讨...
Read on GithubGithub Stats Page
repotechsstarsweeklyforksweekly
Flutter-Triad/Flutter-TriadDartC++CMake350150
cem256/manga_clean_archDartRubyOther62030
snakepacker/pythonDockerfileMakefilePython660440
jhipster/generator-jhipster-svelteEJSJavaScriptOther570160
monanadmin/MONAN-ModelFortranPythonC1010+1
EDOLAB-platform/EDOLAB-MATLABMATLABC++22050
bitslab/jakob_webpageNunjucksJavaScriptCSS20160
apple/axlearnPythonJupyter NotebookOther3160560
KillianLucas/open-interpreterPython28.8k+9582.5k+93
stan-dev/rstanRC++Makefile969+1264+2