본문 바로가기

분류 전체보기

(39)
On the Robustness of Open-World Test-Time Training: Self-Training with Dynamic Prototype Expansion 논문 공부 이 논문은 CVPR'23에 publish 된 따끈따끈한 논문이다 South China 대학에서 나온 논문이며, https://github.com/Yushu-Li/OWTTT. 에서 코드도 확인할 수 있다. [논문 요약] * (거의 처음으로) open-world test-time training (TTT)를 다루었다. * Evaluation과 model update가 번갈아 진행되는 sequential TTT (sTTT)를 다루었다. Introduction 기존의 unsupervised TTT methods들은 target domain의 samples이 사전에 다 존재하는 off-line setting이 많았다. 하지만 실제 상황에서는 inference stage에 도달하기 전까지 target domain ..
Learning a Neural Solver for Multiple Object Tracking 논문 공부 이 논문은 CVPR 2020에 publish 된 논문이며, 2023-10-16 기준 인용수 375를 기록중인 핫한 논문이다. https://bit.ly/motsolv. 에 친절히 코드도 공유되어있다. Introduction 이 논문이 나오던 시절에.. 대부분의 MOT는 tracking-by-detection으로 해결하는 것이 대세였다. 😉 frame 별로 object detection을 구한다음, 별도의 optimization problem을 풀어서 data association을 수행하는 경우가 많았다. Data association 문제는 대게 graph partitioning 문제로 모델링되는 경우가 많았는데, node는 object detection으로, edge는 각각의 detection들이 같..
AdaContrast: Contrastive Test-Time Adaptation 논문 공부 해당 논문은 CVPR'22에 publish된 논문이며 현재 90회의 citation을 기록하고 있다. closed-set test-time (source-free) adaptation for image classification (길다 길어!) 를 다룬 논문이다. Introduction 현실적인 상황에서 training data와 test data의 data distribution이 일치하지 않는 domain shift 현상이 자주 나타난다. Domain Adaptation (DA)은 source domain의 정보를 target domain에 잘 transfer하여 domain shift에 강이한 모델을 학습하는 것을 목표로한다. 이 work은 특히 DA 중에서도 Test-Time (source-fre..
TrackFormer: Multi-Object Tracking with Transformers 논문 공부 1. Introduction MOT의 목표는 video sequence안에서 objecrt의 trajectory들을 찾아내는 것이다. (이 논문 나올때 기준의) 대부분의 MOT 방법론들은 tracking-by-detection 또는 tracking-by-regression의 형태를 취하고 있었다. Tracking-by-detection : 일단 object들을 detect하고 나서, data association을 추가로 수행하는 형태 Tracking-by-regression : data association을 수행하지 않고, regression module을 통해 motion prediction을 수행 하지만 기존의 방법들은 추가적인 nerual net module이 필요하거나, 계산 복잡도가 높은 추..
Multiple Object Tracking 서베이 논문 정리 (Multiple Object Tracking in Recent Times : A Literature Review) 당장 MOT에 대해 아는건 없고, 서베이를 하나 읽긴해야할 것 같아서 2022년에 나온 서베이 논문을 읽어보았다. 😃 (논문 링크 : https://browse.arxiv.org/pdf/2209.04796.pdf) 0. Abstract MOT는 occlusion, similar appearance, small object detection difficulty, ID switching 등을 해결해야하는 고난이도 computer vision task이다. 이 문제를 해결하기 위해 transformer의 attentioin mechanism, GCN을 사용한 tracklet 사이의 interrelation 측정, siamese network을 사용한 appearance similarity 측정, CNN 을 사..
DeepSORT : SIMPLE ONLINE AND REALTIME TRACKING WITH A DEEP ASSOCIATION METRIC 논문 공부 DeepSort 논문의 전체 스토리 및 읽으면서 새롭게 공부한 내용들을 정리함 (논문 링크 : https://arxiv.org/abs/1703.07402) 1. Introduction 원래 MOT를 위한 SORT 라는 알고리즘이 있었다. SORT 알고리즘은 image space에 Kalman filtering을 적용하고, hungarian method를 수행하여 data association을 수행. 그렇다면 Kalman filtering은 무엇인가? 🤔 Kalman filter는 1960년 NASA의 루돌프 칼만이 개발한 알고리즘으로, 시스템이 선형적이고 가우시안 분포를 따를 때 사용할 수 있는 localization 예측 알고리즘이다. 1) object의 state (위치, 속도 등)을 예측하는 mo..
Object Tracking 개념 공부 Object Tracking 이란? 🤔 비디오 안에 있는 1) object들을 찾고 2) 각각의 object들을 trajectory로 연결하는 작업 vkdeo tracking, visual tracking, image tracking 등 다양한 종류가 존재한다 Object Tracking 의 종류 Video tracking : 비디오 안에서 움직이즌 object를 track 하는 task Visual tracking : visual target의 미래 위치를 예측하는 task Image tracking : salient object을 자동으로 감지하고 track까지 하는 task Object Tracking 이 어려운 이유 Training and Tracking Speed : tracking 정확도를 떠..