Online Action Detection数据集及主流方法代码学习

备注：对近期阅读的几篇在线动作检测论文中使用的数据集，以及对数据集提取特征的方法进行记录。

• Online Action Detection数据集
• • 数据集介绍
  • 在线动作检测论文代码学习

THUMOS 14

Todo

TVSerises

Todo

HDD

Todo

1.OadTR（ICCV2021I）

1)数据处理

• 方法：直接预训练好的TSN提取特征（双流特征）
• THUMOS14：作者提供THUMOS14数据集提取好的特征
  • Kinetics预训练特征 THUMOS14-Kinetics feature
  • Activitynet预训练特征THUMOS14-Anet feature

2)代码运行

• 问题1：运行一般直接报错“OSError: [Errno 22] Invalid argument”
  • 解决方法：在本地机器跑的，可能内存不够。把dataloader中的pin_memory改为False，num_worker改为0后运行正常。
• 问题2：运行至代码 x = self.linear_encoding(x)，提示维度不匹配
  • 解决方法：修改config里面的dim_feature（ActivityNet预训练特征修改为3072，Kinetic预训练特征修改为4096，其他使用单模态特征情况根据对应设置修改）

2.LSTR（NuerIPS2021I）

1)数据集

2)代码运行

• 问题1：引用“rekognition_online_action_detection”标红
  • 方法：把作者自己写的包的路径，src标记为Source Root

from rekognition_online_action_detection.utils.parser import load_cfg
from rekognition_online_action_detection.utils.env import setup_environment
from rekognition_online_action_detection.utils.checkpointer import setup_checkpointer
from rekognition_online_action_detection.utils.logger import setup_logger
from rekognition_online_action_detection.datasets import build_data_loader
from rekognition_online_action_detection.models import build_model
from rekognition_online_action_detection.criterions import build_criterion
from rekognition_online_action_detection.optimizers import build_optimizer
from rekognition_online_action_detection.optimizers import build_scheduler
from rekognition_online_action_detection.engines import do_train