1968年，原任教於美國史丹福大學核子醫系之葉鑫華 教授，膺命返國開創現代核醫子醫學，於1970年成立全國首創之核子醫學中心。自建築設計，器材採購，以迄人員訓練，蓽路藍縷，慘澹經營，終於1971年9月， 借復健部職業治療科房舍正式開始作業，現代核子醫學乃告引進我國。
1974年中心改制為核子醫學部，另聘請泰籍印德拉蘇菲女士，任客座物理師半年，協助放射免疫分析實驗作業，可收核子結構、功能與試管檢查兼籌並顧，無所偏廢之宏效，既有利於核子醫學本身之發展，復有益於患者之最佳服務。此外，更可使器材集中使用，維護方便，污染易加控制，發揮最大效益。
1975年10月，中正樓﹝後更為思源樓﹞新廈落成，本部乃遷入現址作業。 本部自成立以來，經盧故院長致德、鄒故院長濟勳與歷任院長全力支持，連年擴充發展，於1977年引進國內首部核醫專用電腦，更成立全國首創之輻射傷害防制中心，1984年購置全國第一座單一光子電腦斷層攝影機，本部業已進入第三代尖端作業紀元，非但領導國內，且與歐美先進並駕齊驅。
1992年設立國家多目標醫用迴旋加速器中心，首開國內代謝及功能性正子電腦斷層攝影診斷先河，進入核醫第四代尖端作業紀元。1998年引進全國首部偶合電腦斷層攝影儀，普及正子電腦斷層攝影之臨床服務與研究，造福病患。2002年整合完成國家基因醫學正子基因探針核心設施, 引進全國首部微型正子斷層掃描儀。2003年，完成無片化建立PACS報告系統。2013年N-13 AMMONIA 通過衛福部查核完成認證，為全國首創。2018年與美國GMS合作，成立Tc-99m TRODAT-1腦神經受體影像學習中心、設立全方位正子磁振影像中心，同年，與陽明大學合作，設置國內第一台動物用Bruker 7T PET/MR影像儀。2019年，亞洲唯一小動物暨核磁共振影像儀開幕。2023年為國內第一家採用PRRT療法治療神經內分泌腫瘤之醫療院所，同年，設立核醫精準醫療中心(Nuclear Theranostics Center)。
節錄自本院官網