OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述

这篇具有很好参考价值的文章主要介绍了OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

Class 1:开营仪式&OpenMMLab概述

开营仪式

OpenMMLab 简介

why?

随着深度学习、计算机视觉等学科的发展,各大研究机构和公司陆续开源自己的深度学习框架,论文发表同时开源代码也成了行业内的习惯。

when?

OpenMMLab诞生于2018年,是一个由中国开发者主导,有国际影响力的人工智能·计算机视觉开源算法体系。

OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述

相比之下,OpenMMLab是开源社区的后起之秀。

官网:https://openmmlab.com

Github:https://github.com/open-mmlab

公众号:OpenMMLab

what?

那么OpenMMLab中都有些什么呢?

OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述

OpenMMLab累计开源超过30个算法库、2400个预训练模型,涵盖图像识别分类、目标检测、图像分割、姿态估计、视频理解、OCR、3D目标检测、3D人体姿态估计、模型轻量化、自监督、少样本、光流、预训练、多模态、AIGC、推理部署等等计算机视觉任务,在Github上累计获得十万颗star,超过了Pytorch。

for who?

无论是巨头公司做商业产品,研究机构发顶会论文,各行各业做AI应用,大学生做毕业设计,中小学生参加科创竞赛,都可以站在OpenMMLab巨人肩膀上,开箱即用,开发自己的人工智能项目。 也许大家的下一个课程作业,下一场kaggle竞赛,下一篇毕业论文,下一家入职的公司,就能用到OpenMMLab。

OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述

OpenMMLab 总体框架

万丈高楼平地起

OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述

OpenMMLab所有算法库都在Github上免费开源,并且有专人维护,我们可以进入每个算法库的Github主页,点star或者提issue、提PR,下载所有的源代码和模型文件。

二十分钟入门计算机视觉开源神器OpenMMLab

课程回放链接:二十分钟入门计算机视觉开源神器OpenMMLab

By:同济子豪兄

OpenMMLab概述

无论身处什么领域,都可以站在OpenMMLab巨人肩膀上,使用开箱即用的模型开发自己的人工智能项目~

OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述

OpenMMLab各开源算法库详细介绍

明星算法库:MMDetection

首推的就是目标检测算法库MMDetection,它可以解决目标检测实例分割全景分割和目标追踪任务
这是OpenMMLab在业界最有影响力的算法库,在github上有2万多star~

OpenMMLab是开源算法体系,它已经提供了各个计算机视觉方向的大量开箱即用的预训练模型和算法。也就是说
OpenMMLab的算法研究员已经帮我们把这些cv任务的常见算法都现好了!

MMDetection被广泛用于学术界和工业界,很多顶会论文,很多比赛的冠军,很多商业落地的产品都是基于MMDetection实现的!

MMYOLO

还有一个做目标检测的算法库叫做MMYOLO,它是专门用来解决YOLO目标检测问题的,它的特点就是特别快!!!

OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述

很多同学做毕业设计,其实就是标注一个自己的目标检测数据集,然后用MMYOLO去跑一下,训练一个模型,然后实时的去预测!

MMOCR

OpenMMLab还有一个文字检测识别的算法库,叫做MMOCR,那这也是计算机视觉很古老的一个经典问题了,它主要解决三类问题,文本检测就是把图像上的文本区域抠出来,或者说画出来,文本识别呢是把文字的内容识别出来,关键信息提取呢是对一些结构化的票据,证件牌照来进行信息的提取。

MMDetection3D

MMDetection3D是专门做3D目标检测的算法库,这个在无人驾驶中用的特别多,要通过激光雷达和毫米波雷达,感知无人驾驶车周围的3d点云数据,来进行3d目标检测,很多无人驾驶的初创公司都使用MMDetection3D来实现自己的无人驾驶算法。

MMRotate

MMRotate是专门做旋转目标检测算法库,在传统的目标检测框是横平竖直的,但是在旋转目标检测框有方向,比如说不同方向的车,不同方向的船,那这是一个比较小众的研究领域,如果你的研究领域恰恰是旋转框目标检测,那MMRotate将是你最佳的学习资料!

MMSegmentation

MMSegmentation是专门做图像分割,特别是语义分割的算法库,在街景,在无人驾驶遥感图像医疗领域,语义分割都是非常重要的算法,任务本质上就是给每一个像素进行分类。可以用它来识别医疗影像中的病灶区域,肿瘤的区域,遥感图像中河流山地农田的面积,街景数据里边的马路牙,交通标志和其他车的位置以及车道线,所以语义分割是一个非常常用的计算机视觉任务,MMSegmentation提供了600多个预训练模型,复现了40多篇的经典和前沿的语义分割的论文,那如果你想入门语义分割领域,MMSegmentation将是你最佳的学习资料!

MMpretrain

MMpretrain呢是做图像分类,预训练和多模态的算法库,那图像分类也是计算机视觉解决的,基础任务之一,用MMpretrain可以实现图像分类,图像描述,视觉问答,视觉定位和视觉检索。

MMpose

MMPose 是一款基于 PyTorch 的姿态分析的开源工具箱,所谓的姿态估计其实就是关键点检测,比如说把这么一个人各个的关节骨架的点识别出来,然后串成一个火柴人,那这就叫做姿态估计,通过姿态估计,我们就能定量的去衡量这个人的行为动作,比如说健身的打分~

MMHuman3D

MMHuman3D 是一款基于 PyTorch 的人体参数化模型的开源工具箱。

所谓的三维人体姿态估计就是要用一个3d的模型去包络出人体,我们就可以用一个3d的数字人去拟合一个真人,特别是在动作捕捉领域和虚拟现实领域,有了一个3d的人,就能跟真实世界的人进行对应了,比如说在足球运动里,在交通事故的模拟中,甚至在很多的竞技类运动中,都可以用到这个算法。

MMAction2

MMAction2 是一款基于 PyTorch 的视频理解开源工具箱,MMAction2 支持多种视频理解任务,包括动作识别,时序动作检测,时空动作检测以及基于人体姿态的动作识别。

MMagic

MMagic 是基于 PyTorch 的图像&视频编辑和生成开源工具箱,MMagic 支持了流行的图像修复、图文生成、3D生成、图像修补、抠图、超分辨率和生成等任务的应用。特别是 MMagic 支持了 Stable Diffusion 的微调和许多激动人心的 diffusion 应用,例如 ControlNet 动画生成。MMagic 也支持了 GANs 的插值,投影,编辑和其他流行的应用。

MMDeploy

MMDeploy 提供了一系列工具,帮助我们更轻松的将 OpenMMLab 下的算法部署到各种设备与平台上。

Playground

OpenMMLab还有一个趣味应用的游乐场,叫做playground,在playground里有很多有趣的项目,其中一些项目也很前沿,比如说结合最新的这个SAM视觉大模型,你可以用它来辅助你标注,用它来做视频实例分割。这样。就可以结合我们其他的算法库,来开发出你自己的有趣又有用的好玩应用!

OpenMMLab开源生态

全球有超过1800个开发者参与了OpenMMLab开源算法库的代码贡献;OpenMMLab的使用者涵盖了科研院所,高校和各行各业的商业公司;同时有一些大家耳熟能详的,影响力非常大的开源项目,也是基于OpenMMLab开发的!文章来源地址https://www.toymoban.com/news/detail-468083.html

到了这里,关于OpenMMLab-AI实战营第二期-课程笔记-Class 1:开营仪式&OpenMMLab概述的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【OpenMMLab AI实战营第二期】目标检测与MMDetection

    目标检测的基本范式 划窗 使用卷积实现密集预测 锚框 多尺度检测与FPN 单阶段无锚框检测器选讲 RPN YOLO、SSD Focal Loss与RetinaNet FCOS YOLO系列选讲 什么是目标检测 目标检测:给定一张图片,用矩形框框出所有感兴趣物体同时预测物体类别 目标检测与图像分类区别 图像分类通常

    2024年02月08日
    浏览(43)
  • 【OpenMMLab】AI实战营第二期Day10:底层视觉与MMEditing

    本课程包含底层视觉和MMEditing两个部分。第一部分介绍图像超分、深度学习和网络训练的相关算法,第二部分介绍超像素卷积、无监督学习、卷积网络和空间注意机制,以及这些算法在视觉框架中的实践应用。 📷介绍计算机视觉里面一个重要的问题:图像超分辨率以及相关

    2024年02月09日
    浏览(31)
  • AI实战营第二期 第十节 《MMagic 代码课》——笔记11

    MMagic (Multimodal Advanced, Generative, and Intelligent Creation) 是一个供专业人工智能研究人员和机器学习工程师去处理、编辑和生成图像与视频的开源 AIGC 工具箱。 MMagic 允许研究人员和工程师使用最先进的预训练模型,并且可以轻松训练和开发新的定制模型。 MMagic 支持各种基础生成

    2024年02月14日
    浏览(30)
  • AI实战营第二期 第六节 《MMDetection代码课》——笔记7

    MMDetection 是被广泛使用的检测工具箱,包括了目标检侧、实例分割、全景分割等多个通用检测方向,并支持了 75+ 个主流和前沿模型, 为用户提供超过 440+ 个预训练模型, 在学术研究和工业落地中拥有广泛应用。该恇架的主要特点为: 模块化设计。MMDetection 将检测框架解耦成不

    2024年02月08日
    浏览(39)
  • AI实战营第二期 第七节 《语义分割与MMSegmentation》——笔记8

    MMSegmentation 是一个基于 PyTorch 的语义分割开源工具箱。它是 OpenMMLab 项目的一部分。 main 分支代码目前支持 PyTorch 1.6 以上的版本。 代码链接:https://gitee.com/open-mmlab/mmsegmentation 统一的基准平台。我们将各种各样的语义分割算法集成到了一个统一的工具箱,进行基准测试。 模块

    2024年02月08日
    浏览(34)
  • AI实战营第二期 第九节 《底层视觉与MMEditing》——笔记10

    本节内容 : 图像超分辨率 Super Resolution 基于卷积网络的模型 SRCNN 与 FSRCNN 损失函数 对抗生成网络 GAN 简介 基于 GAN 的模型 SRGAN 与 ESRGAN 视频超分辨率介绍 实践 MMEditing 1 图像超分辨率 : 根据从低分辨率图像重构高分辨率图像 。 将图像放大,变清晰 提高图像的分辨率 高分图像

    2024年02月09日
    浏览(25)
  • AI实战营第二期 第五节 《目标检测与MMDetection》——笔记6

    MMDetection 是一个基于 PyTorch 的目标检测开源工具箱。它是 OpenMMLab 项目的一部分。是目前应用最广的算法库 主分支代码目前支持 PyTorch 1.6 以上的版本。代码链接:https://gitee.com/open-mmlab/mmdetection。 模块化设计。MMDetection 将检测框架解耦成不同的模块组件,通过组合不同的模块

    2024年02月08日
    浏览(25)
  • 【OpenMMLab AI实战营二期笔记】第十一天 玩转AIGC神器MMagic代码教程

    1.1 安装Pytorch 1.2 安装MMCV、MMEngine环境 1.3 安装MMagic 方式一: 方式二:源码安装 1.4检查安装成功 1.5 安装其他工具包 2.1 进入 MMagic 主目录 2.2下载样例图片 2.3 运行预测 3.1 导入工具包 3.2 载入模型 3.3 指定Prompt文本 3.4 预测 4.1 进入 MMagic 主目录 4.2 在数据集上训练Dreambooth 4.3 用

    2024年02月10日
    浏览(25)
  • MMPose(openmmlab AI实战营二期第一节)

    链接:人体关键点检测与MMPose_哔哩哔哩_bilibili 赶了个进度,实际上没听到,一个方向被浓缩成50分钟是有点难度。后续有需要再回顾吧 人体姿态估计:识别人体关键点坐标。模式识别任务,难点是始终在变化。以关键点连线,2/3D中还原人体姿态。PoseC3D:基于人体姿态识别行

    2024年02月07日
    浏览(28)
  • AI实战营第二期——第一次作业:基于RTMPose的耳朵穴位关键点检测

    根据中医的“倒置胎儿”学说,耳朵的穴位反映了人体全身脏器的健康,耳穴按摩可以缓解失眠多梦、内分泌失调等疾病。耳朵面积较小,但穴位密集,涉及耳舟、耳轮、三角窝、耳甲艇、对耳轮等三维轮廓,普通人难以精准定位耳朵穴位。 Labelme标注关键点检测数据集(子

    2024年02月08日
    浏览(36)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包