康熙第十三子愛新覺羅·胤祥,康熙六十一年(1722年)清世宗雍正帝即位時,受封怡親王。管理戶部三庫,在財務管理上有所建樹。
雍正三年(1725年),興修水利,清世宗為其題寫“忠敬誠直,勤慎廉明”的匾額。胤祥于雍正八年(1730年)卒,謚賢,他是雍正唯一禮遇的胞兄弟,屢加賞賜,主要是因胤祥于政治無野心,為“自古無此公忠體國之賢王”,是除鐵帽王之外,又一"世襲罔替"親王。
怡親王府又有新舊兩處之分。怡親王府舊府位于王府井大街路東,怡親王新府位于朝陽門內大街路北??滴醯谑迂废?,封怡親王,是除鐵帽王之外,又一"世襲罔替"親王。
《乾隆京城全圖》繪有賢良寺,東起今校尉胡同,西鄰王府井大街,北至金魚胡同,南起帥府園胡同。中路正門面闊五間,大殿面闊七間,左右配殿面闊七間,后殿面闊五間。府址現(xiàn)為校尉小學和紙盒廠。