2021_Project/Multimodal
-
Fusion of medical imaging and electronic health records using deep learning: a systematic review and implementation guidelines2021_Project/Multimodal 2022. 1. 21. 16:48
이번 포스트에서는 multi modal network를 구현하는 방법에 대해 이야기하도록 하겠다. 물론 fusion 방법은 연구자의 코딩 방식에 따라 달라지겠지만 대표적으로 사용하는 방법들은 오늘 다룰 논문에 잘 소개되어있다. Fusion of medical imaging and electronic health records using deep learning: a systematic review and implementation guidelines 1. Introduction 실제 사람과 같이 automated detection 및 classification 시스템은 의료 영상 데이터와 EHR(electronic health record)로부터의 clinical한 데이터를 같이 사용했을 때 더 좋은 성..
-
Brain age prediction using fusion deep learning combining pre-engineered and convolution-derived features2021_Project/Multimodal 2022. 1. 17. 18:03
2021년에 시작하여 아직 진행 중인 프로젝트는 brain age prediction이다. 3D brain MR image로부터 CNN을 이용하여 brain age(=year)을 예측하는 이 프로젝트는 언뜻 보면 단순해보이지만, 여기에 어떠한 나만의 selling point를 집어넣어 acc를 효율적으로 더 높이는가를 생각하는것은 쉽지 않았다. 수많은 연구진들이 위와 비슷한 주제로 논문을 발표했으며 따라서 웬만한 아이디어는 이미 다 나와있었다. (전반적인 brain age prediction에 대한 연구 동향은 다른 포스트에서 다루도록 하겠다.) 그러던 도중, 우연히 학교 수업을 듣다가 multi-modal learning에 대한 간략한 이야기를 들었고 이를 내 프로젝트에 접목시키면 좋은 결과를 가져다 ..