본문 바로가기

Object Tracking 공부

(14)
QDTrack: Quasi-Dense Similarity Learning for Multiple Object Tracking 논문 공부 이 논문 (QDTrack)은 CVPR'21 에 publish 된 논문으로 2023.10.23 기준 260 회의 citation을 가지는 꽤 핫한 논문이다. 알고리즘이 (개념만 들으면) 간단하고, plug-in 하기도 쉽고, 성능도 많이 오르고, 코드도 잘돼있어서 인기가 많은듯하다. (https://github.com/SysCV/qdtrack.에서 코드도 찾아볼 수 있다.) Introduction MOT 논문을 좀 읽어본 사람들이라면 대부분의 MOT works에서 loss를 줄때, 아래 figure의 (a,b) 같은 frame 내의 Det/GT를 한개씩 매칭시켜서 Det loss 또는 ID classification loss를 주었다는 사실을 알고 있을 것이다. 하지만 QDTrack의 저자는 이러한 spa..
Learning a Neural Solver for Multiple Object Tracking 논문 공부 이 논문은 CVPR 2020에 publish 된 논문이며, 2023-10-16 기준 인용수 375를 기록중인 핫한 논문이다. https://bit.ly/motsolv. 에 친절히 코드도 공유되어있다. Introduction 이 논문이 나오던 시절에.. 대부분의 MOT는 tracking-by-detection으로 해결하는 것이 대세였다. 😉 frame 별로 object detection을 구한다음, 별도의 optimization problem을 풀어서 data association을 수행하는 경우가 많았다. Data association 문제는 대게 graph partitioning 문제로 모델링되는 경우가 많았는데, node는 object detection으로, edge는 각각의 detection들이 같..
TrackFormer: Multi-Object Tracking with Transformers 논문 공부 1. Introduction MOT의 목표는 video sequence안에서 objecrt의 trajectory들을 찾아내는 것이다. (이 논문 나올때 기준의) 대부분의 MOT 방법론들은 tracking-by-detection 또는 tracking-by-regression의 형태를 취하고 있었다. Tracking-by-detection : 일단 object들을 detect하고 나서, data association을 추가로 수행하는 형태 Tracking-by-regression : data association을 수행하지 않고, regression module을 통해 motion prediction을 수행 하지만 기존의 방법들은 추가적인 nerual net module이 필요하거나, 계산 복잡도가 높은 추..
Multiple Object Tracking 서베이 논문 정리 (Multiple Object Tracking in Recent Times : A Literature Review) 당장 MOT에 대해 아는건 없고, 서베이를 하나 읽긴해야할 것 같아서 2022년에 나온 서베이 논문을 읽어보았다. 😃 (논문 링크 : https://browse.arxiv.org/pdf/2209.04796.pdf) 0. Abstract MOT는 occlusion, similar appearance, small object detection difficulty, ID switching 등을 해결해야하는 고난이도 computer vision task이다. 이 문제를 해결하기 위해 transformer의 attentioin mechanism, GCN을 사용한 tracklet 사이의 interrelation 측정, siamese network을 사용한 appearance similarity 측정, CNN 을 사..
DeepSORT : SIMPLE ONLINE AND REALTIME TRACKING WITH A DEEP ASSOCIATION METRIC 논문 공부 DeepSort 논문의 전체 스토리 및 읽으면서 새롭게 공부한 내용들을 정리함 (논문 링크 : https://arxiv.org/abs/1703.07402) 1. Introduction 원래 MOT를 위한 SORT 라는 알고리즘이 있었다. SORT 알고리즘은 image space에 Kalman filtering을 적용하고, hungarian method를 수행하여 data association을 수행. 그렇다면 Kalman filtering은 무엇인가? 🤔 Kalman filter는 1960년 NASA의 루돌프 칼만이 개발한 알고리즘으로, 시스템이 선형적이고 가우시안 분포를 따를 때 사용할 수 있는 localization 예측 알고리즘이다. 1) object의 state (위치, 속도 등)을 예측하는 mo..
Object Tracking 개념 공부 Object Tracking 이란? 🤔 비디오 안에 있는 1) object들을 찾고 2) 각각의 object들을 trajectory로 연결하는 작업 vkdeo tracking, visual tracking, image tracking 등 다양한 종류가 존재한다 Object Tracking 의 종류 Video tracking : 비디오 안에서 움직이즌 object를 track 하는 task Visual tracking : visual target의 미래 위치를 예측하는 task Image tracking : salient object을 자동으로 감지하고 track까지 하는 task Object Tracking 이 어려운 이유 Training and Tracking Speed : tracking 정확도를 떠..