Ethan's Winery

- IntroductionAI 가 발전할수록 privacy 문제나 윤리와 관련된 문제가 대두되고 있는데, 이를 위해 기존의 정보를 지우는 machine unlearning 이라는 task 가 연구되어왔음이러한 문제는 continual learning task 에도 적용되기 때문에, 해당 논문에서 CL 에서 MU 를 처음으로 진행하며 Learning with Selective Forgetting (LSF) 를 제안함Continual learning setting 중 Task-Incremental Learning (TIL)에서 진행되었는데, 아무래도 처음 진행하다보니 최대한 쉽게 task 를 풀기위한 setting 이 아닐까 싶음 Task Setting각 task 마다 데이터가 입력으로 들어오는건 일반적인 ..

- Introduction스마트 시티 환경에서 공공 공간 침해 또는 침범의 탐지가 중요해졌음다만 이 작업을 사람이 직접 하기엔 많은 시간과 비용이 들어가는 문제가 있음따라서 이를 visual change detection task 로 생각하고 해결해결해야하는 문제들조명 / 밝기 변화대비 차이화질, 해상도, 노이즈스케일, 포즈, 가림- Related Works변화 감지의 정의이미지 간의 고차원 추론을 통한 외관상의 실질적 변화 감지객체의 삽입이나 삭제 또는 구조적 변환 포함주요 선행 연구전통적인 방법CDNet 데이터셋 기반 연구Semantic Change DetectionDeep Learning 기반 접근법- Method모델 구성Siamese network 와 Fully convolutional netwo..

최근에 업무를 진행하여 npu 를 위한 모델 변환을 진행함모델 변환 후 평가를 진행해보니, 기존 서버에서 측정한 모델 성능이 재현되지 않음문제가 발생했을 가능성이 있는 부분은 2곳변환된 모델에 입력으로 넣어준 데이터변환하기 전 모델일단 변환하기 전 onnx 모델을 살펴보기 위해 onnxruntime 으로 평가를 진행해보니 이 또한 서버 성능을 재현하지 못함.import numpy as npimport onnxruntime as ortimport osimport globbin_directory = [데이터 디렉토리]model_path = [모델 경로]session = ort.InferenceSession(model_path)input_name = session.get_inputs()[0].nameclass..

RuntimeError: The detected CUDA version (12.3) mismatches the version that was used to compile PyTorch (11.8). Please make sure to use the same CUDA versions. 오픈 소스 코드를 받아, 가상 환경 구성 중에 위와 같은 에러가 발생했음사용 중인 gpu 는 RTX 3090 으로 nvidia-smi 를 찍어보면 cuda 12.2 로 나오고, pytorch 는 cu11.8 로 받아둔 상태그럼 도대체 12.3 cuda version 은 어디서 오는가??좀 알아보니 가상환경에 cuda toolkit 이 깔려있지 않아, 기본적으로 깔려있는 cuda version 으로 잡힌 것 같음그래서 아래 링..

Camera Coordinate System 은 아래와 같이 여러 종류가 존재하는데, Camera Parameter 설명 시에 필요하여 짚고 넘어가기로 함3D Coordinate SystemWorld Coordinate System사용자가 임의로 정한 원점을 기준으로 하는 좌표계Camera Coordinate System (위 그림에서 노란색 좌표)카메라 렌즈의 위치가 origin 이 되는 좌표계카메라가 바라보고 있는 방향을 z축원점으로부터 focal length 만큼 떨어진 지점에 있는 곳을 image plane 이라고 부름 2D Coordinate SystemImage Coordinate System (위 그림에서 초록색 좌표)Camera Coordinate System 에서 이어진 z축이 image..

아나콘다(anaconda)란?파이썬(python)을 사용할 때 필요한 여러가지 패키지 관리 및 가상환경을 편리하게 설정할 수 있는 배포판가상환경이란?소프트웨어 개발 시 여러 패키지와 라이브러리를 설치하여 사용하는데, 서로 버전이 맞지 않는 경우 충돌이 일어날 수 있음따라서 패키지와 라이브러리들을 독립적으로 관리할 수 있는 환경을 가상환경이라고 부름아나콘다(anaconda) 다운로드아래 링크로 접속https://www.anaconda.com/download/success Download Now | AnacondaAnaconda is the birthplace of Python data science. We are a movement of data scientists, data-driven enterpris..

원리Camera Parameters 추정Intrinsic parameters: 카메라의 내부 특성 (초점 거리, 주점 위치 등)Extrinsic parameters: 카메라의 위치와 방향Feature Matching & Triangulation여러 이미지에서 대응점(corresponding points) 찾기찾은 대응점들을 3D 공간상에서 triangulation하여 3D 점들 생성Dense ReconstructionSparse한 점들을 기반으로 dense한 3D 모델 생성Depth map 생성 및 refinement 대표적인 MVS PipelineStructure from Motion (SfM)이미지들 간의 상대적 위치 관계 파악Sparse 3D reconstruction 수행Multi-View Ste..

DUST3R 연구 흐름은 아래 링크 참고 바랍니다. GitHub - Ethan-Lee-Sunghoon/Awesome-DUST3R: A curated list of awesome DUST3R/MAST3R related papers.A curated list of awesome DUST3R/MAST3R related papers. - Ethan-Lee-Sunghoon/Awesome-DUST3Rgithub.com - Introduction현대 3D reconstruction 은 아래의 하위 분야들을 통합한 결과라고 볼 수 있음1. Keypoint detection (키포인트 감지)- 이미지에서 특징이 될 만한 중요한 점들을 찾아내는 과정- 예: 모서리, 코너, 특이한 텍스처가 있는 부분 등- 대표적인 알고리즘..

이방성과 등방성에서 '방(方)' 은 방향을 뜻하는 한자 Isotrophic (등방성): 방향과 상관 없이 같은 형태를 보임 위키백과 ► 수학에서 어떤 다양체(manifold)가 등방성이라는 것은 방향에 상관없이 그 다양체의 그 모양(geometry)이 같음을 뜻함 Anisotrophic (이방성=비등방성): 방향이 달라지면 보이는 형태가 달라짐

- Introduction 어떤 물체의 이미지 한 장으로 3D reconstruction 이 가능할까? 최근 2d image generation 분야를 보면, large 모델을 사용하면서 아주 좋은 성능을 보이고 있음► 3D recon 분야에도 적용 (transformers) 1. 이미지를 받아서 triplane representation 형태로 NeRF 추정 (EG3D 에서 제안)Volume 이나 Point cloud 에 비해 연산량이 적음2. Encoder-Decoder architecture 제안 (DINO)- Method  Image EncoderDINO 학습된 ViT 사용 Input: 512 x 512 x 3 Conv Output, ViT Output: (32 x 32) x 768 일반적으로 C..