4 minute read

通用物体分类资源通用目标检测资源自动驾驶资源

1 综述

  1. Vision-Based Traffic Sign Detection and Analysis for Intelligent Driver Assistance Systems: Perspectives and Survey
    2012-12-04 paper
    $\bullet \bullet$ survey

  2. Ongoing Work on Traffic Lights: Detection and Evaluation
    2015 paper
    $\bullet \bullet$ Ongoing

  3. Vision for Looking at Traffic Lights: Issues, Survey, and Perspectives
    2015-12-17 paper
    $\bullet \bullet$ look at
    VIVA 数据集

  4. Evaluating State-of-the-art Object Detector on Challenging Traffic Light Data
    CVPR 2017 2017-06-27 paper
    $\bullet \bullet$ SOTA

  5. A deep learning approach to traffic lights: Detection, tracking, and classification
    2017-07-24
    CCTSDB 数据集,发布了 Bosch Small;

  6. Evaluation of deep neural networks for traffic sign detection systems
    2018-08 online | tensorflow
    $\bullet \bullet$

2 理论

3 信号分类

  1. The German Traffic Sign Recognition Benchmark:A multi-class classification competition
    2011 paper

  2. Man vs. computer: Benchmarking machine learning algorithms for traffic sign recognition
    2012 paper

  3. Multi-column Deep Neural Networks for Image Classification
    CVPR 2012 2012-02-13

  4. Traffic Sign Recognition with Multi-Scale Convolutional Networks
    2012 paper
    GTSRB 数据集,IJCNN 2012 第二名,准确率 98.97%,网络输入使用的是 32x32 的彩色图像,之后的实验中,通过改用灰度图像和增加网络容量,准确率达到 99.17%;

  5. Traffic Sign Recognition – How far are we from the solution?
    2013 paper

  6. Real-time Illumination-invariant Speed-limit Sign Recognition Based on a Modified Census Transform and Support Vector Machines
    2014-01-01 paper
    VIVA 数据集

  7. CNN Design for Real-Time Traffic Sign Recognition
    2017-04-27 paper
    $\bullet \bullet$

  8. Effective traffic signs recognition via kernel PCA network
    2018-03-26

  9. Efficient Traffic-Sign Recognition with Scale-aware CNN
    2018-05-31 paper

  10. Unconstrained Road Marking Recognition with Generative Adversarial Networks
    2019-10-10 paper
    使用 GAN 去模糊,然后基于原有数据做数据增强;

4 信号检测

  1. Real time visual traffic lights recognition based on Spot Light Detection and adaptive traffic lights templates
    2009-07-14 paper
    $\bullet \bullet$
    TLR 数据集,自适应模板匹配,交通信号灯识别,对光照和运动模糊不敏感;

  2. Traffic light recognition using image processing compared to learning processes
    2009-11 paper
    $\bullet \bullet$
    TLR 数据集,自适应模板匹配,交通信号灯识别,使用了 Adaboost 开发系统;

  3. Traffic Lights Detection in Adverse Conditions Using Color, Symmetry and Spatiotemporal Information
    2012-08-12 paper
    $\bullet \bullet$
    TLR 数据集,交通信号灯检测,使用色彩预处理模块,以加强对红色和绿色区域的辨别能力,并处理了“起霜效应”;使用径向变换提升繁华能力;最后使用时空持久性验证最小化误报;可处理雨中,夜间和城市道路等多种情况;

  4. Traffic Light Detection: A Learning Algorithm and Evaluations on Challenging Dataset
    2015-08-13 paper
    $\bullet \bullet$

  5. Learning Based Traffic Light Detection: Evaluation on Challenging Dataset
    VIVA 数据集

  1. Traffic-Sign Detection and Classification in the Wild
    CVPR 2016 2016 paper | blog
    $\bullet \bullet$
    tsinghua 数据集

  2. DeepTLR: A Single Deep Convolutional Network for Detection and Classification of Traffic Lights
    2016-06

  3. SqueezeDet: Unified, Small, Low Power Fully Convolutional Neural Networks for Real-Time Object Detection for Autonomous Driving
    2016-12-04 paper | tensorflow-official
    $\bullet \bullet$
    修改了锚框,并且用先验知识对图像进行了裁剪;

  4. Evaluating State-of-the-art Object Detector on Challenging Traffic Light Data
    CVPR 2017 2017 paper
    $\bullet \bullet$

  5. A Real-Time Chinese Traffic Sign Detection Algorithm Based on Modified YOLOv2
    2017-11-16 paper
    $\bullet \bullet$
    发布了 CCTSDB 数据集

  6. Detecting Traffic Lights by Single Shot Detection
    2018-05-07 paper | caffe-official
    $\bullet \bullet$

  7. Towards Real-Time Traffic Sign Recognition via YOLO on a Mobile GPU
    2018-09 paper
    $\bullet \bullet$

  8. A YOLO Based Approach for Traffic Sign Detection
    2018-04-02 paper
    $\bullet \bullet$

  9. Traffic Sign and Pedestrian Detection and Handling
    2019-05-03 web

  10. Adaptation of a Deep Learning Algorithm for Traffic Sign Detection
    2019-07-29 paper
    $\bullet \bullet$

  11. including traffic light recognition in general object detection with yolo2
    2019 paper
    $\bullet \bullet$

  12. Improved Traffic Sign Detection and Recognition Algorithm for Intelligent Vehicles
    2019-09-18 paper
    $\bullet \bullet$

  13. Traffic Sign Classification with Keras and Deep Learning
    2019-11-04 web
    信号检测识别;

5 车道线分割


TOP

附录

A 数据集

名称 年份 地区 类型 类别数 数据量 大小(G) 分类 检测 分割 说明
GTSRB 2011 德国 标志 43 39,209
12,630
0.3     丰富,官方教程多
GTSDB 2012 德国 标志   600
300
1.6      
tsinghua 2016 中国 标志   100K 108      
TLR 2010 巴黎 信号   10000        
VIVA 2015   信号灯 6            
Bosch 2017 德国 信号灯   5093
8334
30        
LISA-UCSD   美国 信号灯 47 6610 7.7    
BelgiumTS 2010 比利时 标志 62         质量好
CCTSDB 2017 中国 标志 3 15734 8      
Lara   巴黎 信号灯              
WPI   美国 信号灯     20    


German Traffic Sign Recognition Benchmark (GTSRB)
训练集测试集 | 聚数力
图片:1360x1024,交通标志:15x15 -> 250x250,80% 小于50x50,图像格式PPM;
交通信号标志的识别,2011 年 IJCNN 竞赛;该数据集图像全部采集于真实生活场景,由车载摄像头获取10个小时的视频资料,然后利用软件进行提取标注等工作,每张图像由 90% 的主体交通标志和 10% 的背景构成;库中的图像被现实世界的因素所影响,例如角度变化、照明条件(饱和度、地对比度)、运动模糊、遮挡、耀眼杨过、颜色褪色、涂鸦、贴纸等;数据集用于解决交通路标的识别问题,着重于单张图像多分类问题;
官方还提供了辅助数据集合,这些数据提供了图像的3类基本特征:
(1)HOG特征,通过提取局部梯度的直方图作为物体轮廓检测的特征;
(2)Haar-like,通过5个特征模板提取边缘、线性、中心等特征,提取比较规矩的灰度变化特征;
(3)Hue Histograms色调直方图;
Baseline:基于已经给出的 HOG 特征集和 k-nearest neighborthe 算法(欧氏距离);


German Traffic Sign Detection Benchmark(GTSDB)
dataset
图像:1360x800,交通信号标志:16x16 -> 128x128
环境更丰富多样化:不同视角、强光照等
检测器使用Area Under Curve (AUC) of a precision-recall curve进行评估,Bounding box评价使用the PASCAL overlap;
Baseline
3中不同的检测器
(1)基于 Haar 特征的 Viola-Jones detector;
(2)用于检测圆形和三角形的 Hough-like voting scheme;
(3)基于HOG特征的LDA检测器 by presenting it all possible image sections;


Traffic-Sign Detection and Classification in the Wild
datatutorialpaper
图像:2048x2048
清华和腾讯合作创建的一个大型交通标志的 benchmark,有超过 100k 的图像数据集,其中 30k 张包含交通标志;覆盖了中国的5个城市,包括市中心和郊区,包含了照明度和天气变换的差异;源码及模型都是公开的;但是用的人很少……


Traffic Lights Recognition (TLR) Public Benchmarks
图像:640x480
由车载摄像头 C3 vehicle 采集,摄像头 Marling F-046C,帧率 25Hz,约 10000 张图像;摄像头安装在小车前挡风玻璃,数据采集时,小车行驶速度小于50km/h;该数据集提供多种图片格式:MPEG-2、JPEG、JSEQ、RTMaps;


VIVA Traffic Light Detection Challenge 2015
6种标识:红、黄、绿、红左、黄左、绿左
数据处理+caffe 训练


Bosch Small Traffic Lights Dataset
图像:1280x720 ,交通信号标志:大约 8.6
博世小型交通灯数据集,约 10000 张,含 24000 个交通信号;

数据 图片数 信号数 类别数 遮挡信号数 帧率
训练集 5093 10756 15 170 30
测试集 8334 13486 4 2088  

4 种:红、黄、绿、off
read


LISA(UCSD) Traffic Sign Dataset
LISA traffic lights-kaggedownload, home
6610 张图像(彩色、灰度图像),包含 7855 信号;每张图只标注出一个信号灯,其他信号灯并不标注,造成数据不干净;
图像:640x480 -> 1024x522,交通信号标志:6x6 -> 167x168
标注信息:标志类别、位置、大小、是否被遮挡、是否在路边
合并 kitti、Lisa, LISA-on-SSD-mobilenet-tensorflow, TrafficLightsDetection-caffe
LISA:加州大学圣地亚哥分校智能和安全汽车实验室数据集,包括交通标志,车辆检测,交通信号灯和轨迹模式;


BelgiumTS Dataset
官网无过多介绍,但是也有几个比赛在用这个数据集
ppm 转 jpg


CSUST Chinese Traffic Sign Detection Benchmark(CCTSDB)
百度网盘:rv4s Github
中国交通数据集由长沙理工大学综合交通运输大数据智能处理湖南省重点实验室张建明老师团队制作完成;
目前的标注数据只有三大类:指示标志、禁止标志、警告标志;
具体的细分类标准数据集,由于还在制作,暂时将不会公布,请大家关注后续更新! 2020年将推出规模更大、更完善的CCTSDB;


LaRa Traffic Light Recognition(Lara)
tensorflowtensorflow
巴黎交通灯的数据集;


WPI
交通灯、行人和车道检测的数据集;
交通灯:六类,绿色左转,绿色右转,绿色执行,绿色圆形,红色圆形,红色左转;

B 项目

1 分类

  1. Traffic-Sign-Recognition-with-Deep-Learning-CNN
    tensorflow,分类;
  2. 基于Tensorflow的交通标志识别
    blog, blog-english, github
    BelgiumTS 数据集;

2 检测

  1. Traffic-Lights-Detection
    tensorflow 检测交通信号灯;
  2. Udacity Self-Driving Car Engineer Nanodegree
  3. Traffic Lights Detection

C 资源

  1. Traffic Sign Recognition using Convolutional Neural Network
  2. 自动驾驶系统中的交通信号检测和识别
  3. https://cvpr.yonsei.ac.krintranet
  4. 机器学习高质量数据集大集合
  5. 红绿灯 交通标志数据集
  6. 自动驾驶系统中的交通信号检测和识别

Comments