Interpretable multimodal deep learning for time-resolved survival prediction after hepatocellular carcinoma resection
한 줄 요약
Li et al. (2026)은 Hepatocellular carcinoma (HCC) 절제술 후 환자의 Overall survival (OS) 위험을 정적 분류가 아닌 시간 의존적으로 예측하기 위해 TEMPO-HCC라는 Multimodal deep learning 모델을 개발했다. 이 연구는 6개 기관의 1,475명 환자 코호트를 활용하여 Multiphasic MRI, H&E Whole-slide images (WSI), 그리고 Perioperative clinical predictors를 통합했다. TEMPO-HCC는 Discrete-time survival head를 사용하여 수술 후 1, 2, 3, 5년 시점별 사망 확률을 산출하며, External validation cohort에서 C-index 0.751을 기록했다. 기존 Guideline-based staging systems (BCLC, CNLC, AJCC) 및 Unimodal models보다 우수한 Discrimination 성능을 보였으며, 특히 BCLC와 비교했을 때 C-index가 0.598에서 0.751로 유의하게 향상되었다. Hierarchical interpretability를 통해 Radiologic phenotype과 Histopathologic pattern 간의 연관성을 설명 가능한 형태로 제시함으로써 Clinical trust를 높이는 데 기여했다.
방법
Study design 및 Cohort: 본 연구는 Retrospective cohort study로, 2012년 2월부터 2024년 1월까지 6개 기관에서 Curative-intent resection을 받은 Histopathologically confirmed HCC 환자 2,119명을 선별했다. Prior liver-directed therapy 시행자 (n=426), MRI 품질 불량자 (n=119), 주요 Clinical data 누락자 (n=99)를 제외하여 최종 분석 대상은 1,475명이었다. Institution 1-2의 환자 (n=702)는 Derivation cohort로 사용되었으며, 이를 8:2 비율로 Training cohort (n=562)와 Internal test cohort (n=140)로 분할했다. Institution 3-6의 환자 (n=773)는 External validation cohort로 구성되었다.
Data modalities 및 Model architecture: TEMPO-HCC는 세 가지 Modalities를 통합한다. 첫째, Preoperative multiphasic contrast-enhanced MRI (Pre-T1, Arterial, Portal venous, Delayed phases). 둘째, Postoperative H&E-stained whole-slide images (WSI). 셋째, Multivariable Cox regression을 통해 선별된 Independent clinical risk factors (Cirrhosis, Tumor size, Lymph node metastasis [LNMet], Alpha-fetoprotein [AFP])이다. 모델은 Discrete-time survival head를 사용하여 수술 후 12, 24, 36, 60개월 시점에서의 사망 확률을 생성한다.
Endpoint 및 Statistical method: Primary endpoint는 Time-resolved Overall survival (OS) risk prediction이다. 모델 성능 평가에는 C-index, Integrated Brier Score (IBS), 그리고 Time-dependent Area Under the Curve (AUC)를 사용했다. Calibration curves와 Decision curve analysis (DCA)를 통해 예측 정확도와 Clinical utility를 검증했으며, Kaplan-Meier 분석을 통해 High-risk 및 Low-risk 군의 Survival difference를 평가했다.
주요 결과
Predictive performance: External validation cohort에서 TEMPO-HCC는 C-index 0.751 (95% CI: 0.722–0.777)과 IBS 0.087 (95% CI: 0.076–0.099)을 기록했다. Time-dependent AUCs는 12개월 시점 0.836 (0.728–0.932), 24개월 시점 0.781 (0.726–0.827), 36개월 시점 0.812 (0.770–0.846), 60개월 시점 0.680 (0.619–0.744)이었다. Training cohort에서는 C-index 0.845, Internal test cohort에서는 C-index 0.787을 보였다. Calibration curves는 모든 Cohort에서 이상적인 대각선과 근접하여 Predicted risk와 Observed OS risk 간의 일치를 확인했다.
Comparison with staging systems 및 Ablation study: TEMPO-HCC는 BCLC (C-index 0.598), CNLC (0.633), AJCC (0.561)보다 External validation cohort에서 유의하게 우수한 Discrimination 성능을 보였다. TEMPO-HCC를 기존 Staging system에 추가했을 때 C-index와 Time-dependent AUC가 모두 유의하게 향상되었다 (all P < 0.001). Ablation study 결과, Clinical-only model은 C-index 0.685, WSI-only model은 0.752, MRI-only model은 0.792를 기록했다. Radiology와 WSI를 결합한 Bimodal model은 C-index 0.818을 보였으며, 최종 Tri-modal TEMPO-HCC (C-index 0.845)가 가장 높은 성능을 달성했다.
Subgroup analysis 및 Interpretability: External validation cohort의 Subgroup 분석에서 Tumor size, AFP level, Cirrhosis status에 따라 모델 성능이 일관되게 유지되었으며 통계적으로 유의한 차이는 없었다. Center별 C-index는 Center 3 (0.755), Center 4 (0.712), Center 5 (0.745), Center 6 (0.765)로 나타났으며, Center 4의 성능 저하는 상대적으로 작은 Sample size (n=104) 때문으로 추정되었다. Interpretability 분석에서 SHAP analysis는 AFP, Tumor size, Cirrhosis, LNMet를 주요 Risk driver로 식별했다. Grad-CAM maps은 MRI에서 Irregular tumor margins과 Heterogeneously enhancing regions에, WSI에서는 Pathologic lesions의 실제 위치와 일치하는 Hot spots을 강조하며 Normal tissue의 Attention을 효과적으로 억제했다.
강점
이 연구는 6개 기관의 대규모 다기관 코호트 (n=1,475)를 기반으로 External validation을 수행하여 모델의 Generalizability를 엄격하게 검증했다. 기존 정적 예측 모델을 넘어 Time-resolved prediction을 제공함으로써 Postoperative surveillance 계획 수립에 직접 활용 가능한 Dynamic risk assessment를 가능하게 했다. Hierarchical interpretability를 통해 Clinical features, MRI regions, Histopathologic patterns 간의 인과 관계를 추적 가능한 Evidence chain으로 제시하여 Black-box AI의 한계를 극복하고 Clinical trust를 높이는 데 성공했다.
한계
본 연구는 Retrospective design이며, External validation cohort 중 Center 4에서 Sample size가 작아 (n=104) 모델 성능이 다소 저하된 것으로 나타났다. MRI와 WSI 데이터의 전처리 및 Feature extraction 과정에서 기관별 Imaging protocols와 Pathology processing의 이질성이 존재할 수 있으며, 이는 모델의 Robustness에 영향을 미칠 수 있다. 또한, Genomic assays나 Molecular biomarkers가 통합되지 않아 Tumor biology의 미세한 차이를 완전히 반영하지 못할 가능성이 있다.
해석
TEMPO-HCC는 HCC 절제술 후 환자의 OS 위험을 시간적으로 정량화함으로써 Risk-adapted clinical management와 Personalized surveillance 전략 수립에 중요한 도구가 될 수 있다. 기존 Guideline-based staging systems과의 비교에서 입증된 Incremental prognostic value는 Multimodal deep learning이 Clinical decision-making에 실질적인 기여를 할 수 있음을 시사한다. 이 결과는 Oncology와 Biomedical Imaging 교차 분야에서 Computational pathology와 Radiomics의 융합이 단순한 성능 향상을 넘어 해석 가능한 Clinical insight를 제공할 수 있음을 보여준다. LLM Wiki 내 다른 Survival prediction 연구들과 비교할 때, TEMPO-HCC는 Time-dependent risk estimation과 Multi-level interpretability를 결합한 점에서 차별화된 접근법을 제시한다.