Disentangled Multi-modal Learning of Histology and Transcriptomics for Cancer Characterization
이 논문은 조직병리와 전사체 데이터의 이질성, 다중 스케일 통합 부족, 그리고 쌍을 이루는 데이터에 대한 의존성 문제를 해결하기 위해, 해리된 다중 모달 학습 프레임워크를 제안하여 암 진단 및 예후 예측 성능을 크게 향상시킨 연구입니다.
👁️ Category
cs.CV
9793 편의 논문
Time-Aware One Step Diffusion Network for Real-World Image Super-Resolution
이 논문은 고정된 시간 단계의 한계를 극복하고 사전 훈련된 확산 모델의 생성적 사전 지식을 다양한 시간 단계에서 효과적으로 활용하여, 단일 단계로 실사 이미지 초해상도 성능을 극대화하면서도 충실도와 현실감 사이의 조절 가능한 균형을 달성하는 'TADSR'을 제안합니다.
FastAvatar: Towards Unified and Fast 3D Avatar Reconstruction with Large Gaussian Reconstruction Transformers
이 논문은 단일 이미지부터 모노큘러 비디오까지 다양한 일상 기록을 초단위로 처리하여 고품질 3D 가우시안 스플래팅 모델을 생성하고, 추가 관측을 통해 품질을 점진적으로 향상시킬 수 있는 통합된 피드포워드 3D 아바타 재구성 프레임워크인 'FastAvatar'를 제안합니다.
Mitigating Multimodal Hallucinations via Gradient-based Self-Reflection
이 논문은 기존 모델을 미세 조정하거나 보조 모델 없이도 텍스트-시각 편향과 공발생 편향을 완화하여 멀티모달 대규모 언어 모델의 환각 현상을 줄이고 시각적 근거를 강화하기 위해, 1 차 테일러 그래디언트를 활용한 그라디언트 기반 영향 인식 제약 디코딩 (GACD) 방법을 제안합니다.
RTGMFF: Enhanced fMRI-based Brain Disorder Diagnosis via ROI-driven Text Generation and Multimodal Feature Fusion
이 논문은 fMRI 데이터의 낮은 신호 대 잡음비와 텍스트 주석 부재 문제를 해결하기 위해 ROI 기반 텍스트 생성, 하이브리드 주파수 - 공간 인코더, 적응형 의미 정렬 모듈을 통합한 RTGMFF 프레임워크를 제안하여 ADHD-200 및 ABIDE 벤치마크에서 기존 방법보다 우수한 뇌 질환 진단 성능을 입증했습니다.
Easier Painting Than Thinking: Can Text-to-Image Models Set the Stage, but Not Direct the Play?
이 논문은 기존 벤치마크의 한계를 극복하기 위해 구성 (composition) 과 추론 (reasoning) 능력을 포괄적이고 복잡하게 평가하는 새로운 벤치마크 'T2I-CoReBench'를 제안하고, 이를 통해 현재 텍스트 - 이미지 생성 모델들이 고도화된 구성 상황에서는 한계를 보이며 특히 암시적 요소를 추론하는 능력에서 심각한 부재를 드러낸다는 사실을 규명했습니다.
UniView: Enhancing Novel View Synthesis From A Single Image By Unifying Reference Features
이 논문은 단일 이미지 기반의 새로운 뷰 합성 시 발생하는 모호성 문제를 해결하기 위해, 멀티모달 대규모 언어 모델을 활용한 참조 이미지 검색 및 증강 시스템과 플러그 앤 플레이 어댑터 모듈을 도입하여 기존 최첨단 방법보다 우수한 성능을 보이는 'UniView' 모델을 제안합니다.
Improved 3D Scene Stylization via Text-Guided Generative Image Editing with Region-Based Control
이 논문은 텍스트 기반 생성 모델을 활용하여 3D 장면의 스타일 일관성과 뷰 일관성을 동시에 향상시키고, 분할 마스크를 기반으로 한 다중 영역 제어 스타일 전이를 가능하게 하는 새로운 3D 스타일라이제이션 기법을 제안합니다.
LADB: Latent Aligned Diffusion Bridges for Semi-Supervised Domain Translation
이 논문은 데이터가 부족한 도메인에서 부분적으로 짝지어진 데이터를 활용하여 사전 훈련된 소스 도메인 확산 모델과 타겟 도메인 잠재 정렬 확산 모델을 공유 잠재 공간에서 정렬함으로써, 높은 충실도와 다양성을 갖춘 반지도 학습 도메인 번역 프레임워크인 LADB 를 제안합니다.
TrueSkin: Towards Fair and Accurate Skin Tone Recognition and Generation
이 논문은 다양한 조명과 촬영 조건에서 수집된 7,299 장의 이미지로 구성된 'TrueSkin' 데이터셋을 제안하여 기존 다중 모달 및 생성 모델의 피부색 인식 및 생성 편향을 해결하고, 이를 통해 모델의 정확성과 공정성을 크게 향상시키는 방법을 제시합니다.
BWCache: Accelerating Video Diffusion Transformers through Block-Wise Caching
이 논문은 비디오 생성을 위한 Diffusion Transformer(DiT) 의 추론 지연을 해결하기 위해, 중간 시간 단계에서의 특징 유사성을 기반으로 불필요한 계산을 동적으로 캐싱 및 재사용하여 학습 없이 최대 6 배의 속도 향상을 달성하는 '블록 단위 캐싱 (BWCache)' 방법을 제안합니다.
Brain-HGCN: A Hyperbolic Graph Convolutional Network for Brain Functional Network Analysis
이 논문은 뇌 기능 네트워크의 계층적 위상을 고차 왜곡 없이 정밀하게 모델링하기 위해 로렌츠 모델을 기반으로 한 쌍곡선 그래프 합성곱 네트워크 (Brain-HGCN) 를 제안하고, 이를 통해 정신 질환 분류 성능을 기존 유클리드 기반 방법보다 크게 향상시켰음을 보여줍니다.
Person Identification from Egocentric Human-Object Interactions using 3D Hand Pose
이 논문은 3D 손 자세 분석과 객체 인식, 인간 - 물체 상호작용 인식을 결합한 경량 프레임워크 I2S 를 제안하여, 증강현실 기반 보안 시스템에서 실시간으로 사용자를 97.52% 의 F1 점수로 정확하게 식별하는 방법을 제시합니다.
Geodesic Prototype Matching via Diffusion Maps for Interpretable Fine-Grained Recognition
이 논문은 심층 시각 특징의 비선형 매니폴드 구조를 확산 맵과 미분 가능한 니스트롬 보간을 통해 반영하여, 기존 유클리드 거리 기반보다 더 정확한 해석 가능한 세밀한 분류를 가능하게 하는 'GeoProto'라는 새로운 프로토타입 매칭 패러다임을 제안합니다.
Does FLUX Already Know How to Perform Physically Plausible Image Composition?
이 논문은 기존 모델의 한계를 극복하고 조명, 그림자, 반사 등 물리적으로 타당한 이미지 합성을 가능하게 하는 훈련 없는 프레임워크 'SHINE'과 이를 평가하기 위한 새로운 벤치마크 'ComplexCompo'를 제안합니다.
QuadGPT: Native Quadrilateral Mesh Generation with Autoregressive Models
이 논문은 기존 삼각형 메쉬를 사각형으로 변환하는 방식의 한계를 극복하고, 혼합 토폴로지 처리를 위한 통합 토큰화 방법과 강화 학습 기반의 미세 조정 기법을 통해 사각형 메쉬를 종단간 생성하는 최초의 오토레거시 프레임워크인 'QuadGPT'를 제안합니다.
DistillKac: Few-Step Image Generation via Damped Wave Equations
이 논문은 유한 속도로 확률 질량을 이동시키는 감쇠 파동 방정식과 스토캐스틱 Kac 표현을 활용하여, 적은 함수 평가 횟수로도 높은 품질의 이미지를 생성하면서도 수치적 안정성을 유지하는 'DistillKac'이라는 새로운 이미지 생성 모델을 제안합니다.
Customizing Visual Emotion Evaluation for MLLMs: An Open-vocabulary, Multifaceted, and Scalable Approach
이 논문은 기존 평가 방법의 한계를 극복하고 MLLM 의 시각적 감정 인식 능력을 개방형 어휘와 다면적 맥락을 고려하여 확장 가능하게 평가하기 위한 '감정 진술 판단 (Emotion Statement Judgment)' 태스크와 자동화 파이프라인을 제안하며, 이를 통해 현재 MLLM 들의 강점과 인간 대비 약점을 규명했습니다.
COMPASS: Robust Feature Conformal Prediction for Medical Segmentation Metrics
이 논문은 의료 영상 분할 모델에서 파생된 하류 지표 (예: 장기 크기) 의 불확실성을 정량화하기 위해, 기존 블랙박스 방식보다 효율적이고 간결한 구간을 제공하며 공변량 이동 하에서도 타겟 커버리지를 회복하는 새로운 프레임워크인 COMPASS 를 제안합니다.
CircuitSense: A Hierarchical MLLM Benchmark Bridging Visual Comprehension and Symbolic Reasoning in Engineering Design Process
본 논문은 엔지니어링 설계의 계층적 추상화 과정을 평가하기 위해 8,006 개 이상의 문제로 구성된 'CircuitSense' 벤치마크를 제안하며, 시각적 인식과 기호적 추론 간의 심각한 격차를 규명하고 공학적 역량 평가에서 기호적 추론의 핵심적 역할을 강조합니다.