资源 | 做一款炫酷的机器人需要哪些学习资源（机器人资源Awesome系列）

翻译 | AI科技大本营

参与 | 赵博 SuiSui

为什么要制作机器人呢？想参加各种机器人大赛？看起来很炫酷？不过从学习角度说，机器人综合了信息技术、电子工程、机械学、程序设计、控制系统以及认知等多方面的内容，所以做一款机器人可以教会你很多的知识。

接下来要说做一款机器人你需要什么样的学习资料？本文包含跟机器人技术相关的一些链接、软件库、论文和其他对机器人技术有用的、有趣链接。

优质资源列表

• Kiloreaux/awesome-robotics – 该项目收集了大量机器人入门的资料，包含课程、电子书、软件、期刊、行业竞赛和开源库等等。
  https://github.com/Kiloreux/awesome-robotics

• RoboticsLibraries – 列举了大量非常棒的机器人开源库和软件，并标出了开源库的受欢迎程。
  https://github.com/jslee02/awesome-robotics-libraries

• Computer Vision – 计算机视觉相关的课程、电子书、论文、软件、数据库、教程、资源以及博客等。
  https://github.com/jbhuang0604/awesome-computer-vision

• Deep Learning – 神经网络（收集了深度学习相关的课程、电子书、论文、软件、教程、框架、学者、数据库等。）
  https://github.com/ChristosChristofidis/awesome-deep-learning#researchers
  — TensorFlow – 机器智能软件库（TensorFlow Awesome系列，包含大量教程、模型、库、视频、论文、博客以及电子书等。）
  https://github.com/jtoy/awesome-tensorflow
  — Papers – 引用次数最多的深度学习论文
  https://github.com/terryum/awesome-deep-learning-papers

• Deep Vision（Deep Vision Awesome系列，包含大量分类论文、教程、库、视频、博客以及电子书等。）
  https://github.com/kjw0612/awesome-deep-vision

模拟器

• Microsoft Airsim – 微软开源的一款基于虚幻引擎的模拟器，用于促进自动驾驶技术的研究，为无人驾驶提供真实的模拟环境、动力等等。
  https://github.com/Microsoft/AirSim

• Bullet Physics SDK – 实时碰撞检测和多物理环境模拟，用于虚拟现实的多物理场模拟、适用于VR、游戏、视觉效果、机器人技术、机器学习等。
  https://github.com/bulletphysics/bullet3

机器学习

TensorFlow相关

• Keras – Python深度学习库，包含卷积神经网络，循环神经网络等，使用TensorFlow或者Theano框架。
  https://github.com/ahundt/awesome-robotics/blob/master/keras.io

• keras-contrib – Keras社区贡献
  https://github.com/farizrahman4u/keras-contrib

• TensorFlow – 机器智能开源软件库
  https://github.com/ahundt/awesome-robotics/blob/master/tensorflow.org

• recurrentshop – 使用Keras构建复杂循环神经网络的框架
  https://github.com/datalogai/recurrentshop

• tensorpack – 基于TensorFlow的神经网络工具箱
  https://github.com/ppwwyyxx/tensorpack

• tensorlayer – 适用于研究人员和工程师的深度学习与增强学习库
  https://github.com/zsdonghao/tensorlayer

• TensorFlow-Examples – 为初学者提供的TensorFlow手册与实例
  https://github.com/aymericdamien/TensorFlow-Examples

• hyperas - Keras + Hyperopt：方便超参数优化，封装简单
  https://github.com/maxpumperla/hyperas

• elephas – 使用Keras & Spark进行分布式深度学习
  https://github.com/maxpumperla/elephas

• PipelineAI – 端到端机器学习与人工智能平台，实时的Spark与Tensorflow数据通道
  https://github.com/fluxcapacitor/pipeline

• sonnet – 基于TensorFlow的Google Deepmind 应用程序接口,用以构建复杂的神经网络。
  https://github.com/deepmind/sonnet

图像分割

• tf-image-segmentation – 基于Tensorflow 和TF-Slim 库的图像分割框架
  https://github.com/warmspringwinds/tf-image-segmentation

• Keras-FCN
  https://github.com/aurora95/Keras-FCN

日志和消息

• spdlog – 超快的C++日志库
  https://github.com/gabime/spdlog

• lcm – 用于高带宽和低延迟的实时系统，实现轻量级通信和编组、消息传递和数据编组。
  https://github.com/lcm-proj/lcm

跟踪

• simtrack - 一种基于仿真的跟踪框架
  https://github.com/karlpauwels/simtrack

• ar_track_alvar - 用于ROS的AR标记跟踪库
  https://github.com/sniekum/ar_track_alvar

• artoolkit5 - 增强现实工具包，具有优秀的AR标签跟踪软件
  https://github.com/artoolkit/artoolkit5

机器人操作系统

• ROS – 机器人操作系统主页
  https://github.com/ahundt/awesome-robotics/blob/master/ros.org

• ros2/design – ROS 2.0设计文档
  https://github.com/ros2/design

运动学，动力学，约束优化

• jrl-umi3218/Tasks – 使用了约束优化的机器人实时控制与运动学树库
  https://github.com/jrl-umi3218/Tasks

• jrl-umi3218/RBDyn – RBDyn提供一组用于刚体系统动力学建模的类和函数
  https://github.com/jrl-umi3218/RBDyn

• ceres-solver – 求解有界约束和一般无约束优化问题的非线性最小二乘问题
  https://github.com/ceres-solver/ceres-solver

• orocos_kinematics_dynamics - Orocos运动学和动力学的C++库
  https://github.com/orocos/orocos_kinematics_dynamics

• flexible-collsion-library – 在一对由三角形组成的几何模型执行三类临近查找，集成在ROS中
  https://github.com/flexible-collision-library/fcl

• robot_calibration – 用于ROS的通用机器人运动学标定
  https://github.com/mikeferguson/robot_calibration

标定

• handeye-calib-camodocal – 通用的机器人手眼标定
  https://github.com/jhu-lcsr/handeye_calib_camodocal

• robot_calibration – 用于ROS的通用的机器人运动学标定
  https://github.com/mikeferguson/robot_calibration

• kalibr – 用于ROS的摄像机和IMU标定
  https://github.com/ethz-asl/kalibr

增强学习

• gqcnn - Grasp     Quality Convolutional Neural Networks (GQ-CNNs)使用训练集从Dexterity     Network (Dex-Net)中抓取规划
  https://berkeleyautomation.github.io/gqcnn/info/info.html

• Guided Policy Search – 引导策略搜索（GPS）算法和基于线性二次高斯控制的轨迹优化，旨在帮助其他人在对已有工作理解、重用和构建。
  https://github.com/cbfinn/gps

视频/显示/渲染

• Pangolin – 一种轻量级的便携式快速开发库，用于管理OpenGL显示/交互和提取视频输入
  https://github.com/stevenlovegrove/Pangolin

传感器、设备和ARM驱动程序

• libfreenect2 – Windows Kinect V2与Xbox One设备开源驱动
  https://github.com/OpenKinect/libfreenect2

• iai_kinect2 – 在ROS中使用Kinect One (Kinect v2)的工具
  https://github.com/code-iai/iai_kinect2

• grl – 通用机器人技术库：用于Kuka iiwa和Atracsys FusionTrack跨平台驱动程序，具有可选的v-rep和ros驱动；同时也有跨平台手眼标定与工具提示标定。
  https://github.com/ahundt/grl

数据库

• pascal voc 2012 - 经典的参考图像分割数据库
  http://host.robots.ox.ac.uk/pascal/VOC/voc2012/

• openimages – Google庞大的ImageNet风格数据库
  https://github.com/openimages/dataset/

• COCO – 目标分割、关键点和许多其他外部数据库的链接
  https://github.com/ahundt/awesome-robotics/blob/master/mscoco.org

• cocostuff - COCO附加的全场景分割，包括背景和注释
  https://github.com/nightrome/cocostuff

• Google Brain Robot Data -  包含抓取、推和浇注的机器人数据库
  https://sites.google.com/site/brainrobotdata/home

• Materials in Context - 23类真实图像的材料数据库
  http://opensurfaces.cs.cornell.edu/publications/minc/

• Dex-Net 2.0 - 670万对合成点云和具有鲁棒性标签的抓取
  http://bair.berkeley.edu/blog/2017/06/27/dexnet-2.0/

数据收集

• cocostuff - COCO 额外的全场景分割，包括背景和注释
  https://github.com/nightrome/cocostuff

线性代数与几何

• Eigen – 线性代数C++模板库，包含矩阵、向量、数值求解和相关算法
  https://github.com/ahundt/awesome-robotics/blob/master/eigen.tuxfamily.org

• Boost.QVM – 用于Boost的四元数、向量、矩阵库
  https://github.com/boostorg/qvm

• Boost.Geometry – 包含可实例化的几何类，但是库用户也可以使用自定义的类
  https://github.com/boostorg/geometry/

• SpaceVecAlg – 实现三维几何的空间向量代数，使用了Eigen3 线性代数库
  https://github.com/jrl-umi3218/SpaceVecAlg

• Sophus – Lie Groups（用于三维几何）的C++实现，使用了Eigen
  https://github.com/strasdat/Sophus

点云

• libpointmatcher -  一个“迭代最近点”的机器人库和二维/三维映射
  https://github.com/ethz-asl/libpointmatcher

• Point Cloud Library (pcl) – 点云库（PCL）是一个独立的、大规模的、开放式的二维/三维图像和点云处理项目。
  https://github.com/PointCloudLibrary/pcl

同时定位与地图绘制（SLAM）

• ElasticFusion – 实时的密集视觉SLAM系统
  https://github.com/mp3guy/ElasticFusion

• co-fusion – 多目标实时分割、跟踪和融合，ElasticFusion的扩展
  https://github.com/martinruenz/co-fusion

• Google Cartographer - Cartographer提供了实时的二维和三维SLAM系统，可以跨多个平台和传感器配置
  https://github.com/googlecartographer/cartographer/

• OctoMap – 一个有效的基于概率三维映射框架，包含主要的OctoMap库， viewer octovis以及动态EDT3D.
  https://github.com/OctoMap/octomap

• ORB_SLAM2 – 实时SLAM，用于单眼、立体、RGB-D相机，包含循环检测与重定位功能

原文地址：https://github.com/raulmur/ORB_SLAM2

资源推荐

☟☟☟ 更多学习资源，请戳原文