【OpenMMLab AI实战营第二期】二十分钟入门OpenMMLab笔记

OpenMMlab

主页:openmmlab.com

开源地址:https://github.com/open-mmlab

学习视频地址:https://www.bilibili.com/video/BV1js4y1i72P/

概述

开源成为人工智能行业发展引擎

时间轴

  • theano:2007

  • Caffe:2013

  • TensorFlow:2015

  • mxnet:2015

  • 飞桨:2016

  • CNTK:2016

  • Caffe2:2017

  • Pytorch:2017

  • OpenMMLab:2018

统一的深度学习框架->统一的算法框架和生态

OpenMMLab发展历程

请添加图片描述

OpenMMLab总体框架

请添加图片描述

OpenMMLab现状

1架构:所有项目基于一致架构开发

30+研究方向:涵盖多个研究热点方向,算法覆盖完善

300+算法:包括300+先进算法,性能领先

2400+ 预训练模型:用友超过2400个预训练模型,真正实现开箱即用

OpenMMLab算法代表库

目标检测算法库MMDetection

开源地址:github.com/open-mmlab/mmdetection

任务支持:目标检测、实例分割、全景分割

涵盖广泛:440+预训练模型、75+主流+前沿算法、主流学术数据集

算法丰富:两阶段检测器、一阶段检测器、级联检测器、无锚框检测器、Transformer

使用方便:训练工具、测试工具、推理API

科研论文:2018年至今谷歌学术引用超过1900;计算机视觉三大顶会被超过100篇论文作为基础代码库

工业落地:商汤、腾讯、阿里、华为、国内外初创公司

学术比赛:COCO 2018、2019实例分割冠军、Open Image 2019物体检测冠军、Global Wheat Detection冠军、Crowd Human人体检测冠军、Materialist(FGVC6)2019冠军

目标检测算法库 MMYOLO

开源库地址:https://github.com/open-mmlab/mmyolo

文字检测识别算法库 MMOCR

开源库地址:https://github.com/open-mmlab/mmocr

效果极佳的预训练模型

主流学术数据集支持

丰富的训练技巧

3D目标检测算法库 MMDetection3D

开源库地址:https://github.com/open-mmlab/mmdetection3d

7个数据集 40+算法 130+个预训练模型

旋转目标检测算法库MMRotate

开源仓地址:https://github.com/open-mmlab/mmrotate

图像分割算法库 MMSegmentation

开源仓地址:https://github.com/open-mmlab/mmsegmentation

算法丰富:600+个预训练模型

模块化设计:配置简便、容易拓展

统一超参:大量消融实验、支持公平对比

使用方便:训练工具、测试工具、推理API

图像分类+预训练+多模态算法库MMPretrain

开源仓地址:https://github.com/open-mmlab/mmpretrain

  • 图像分类
  • 图像描述
  • 视觉问答
  • 视觉定位
  • 检索

模型库支持了77个算法,共计508个预训练模型

包含了:

  • 丰富的主干网络,入CNN、ViT等
  • 多种自主监督测录,对比学习,掩码学习等
  • 前言的多模态算法、BLIP系列、OFA等

同时提供了详细的文档教程,包括但不限于

  • 入门教程
  • 进阶教程
  • 可视化
  • 分析工具
  • 部署文档
  • 迁移教程
  • 代码API等

姿态估计算法库MMPose

开源仓地址:https://github.com/open-mmlab/mmpose

三维人体姿态估计算法库MMHuman3D

开源仓地址:https://github.com/open-mmlab/mmhuman3d

视觉动作识别算法库 MMAction2

开源仓地址:https://github.com/open-mmlab/mmaction2

全面支持:动作识别、时序检测、时序检测

算法丰富:200+个预训练模型、20+篇论文复现

更有更快:训练速度、模型精度

使用方便:训练工具、测试工具、推理API、多IO后端支持

生成模型+底层视觉+AIGC算法库 MMagic

开源仓地址:https://github.com/open=mmlab/mmagic

模型部署工具箱MMDeploy

开源仓地址:https://github.com/open-mmlab/mmdeploy

猜你喜欢

转载自blog.csdn.net/yichao_ding/article/details/130986576