为纪念两位驻藏大臣的英勇事迹，乾隆皇帝下令将冲赛康衙门改建为双忠祠，并立碑纪念。辛亥革命后，双忠祠先后用作邮局、警察局等机构。西藏和平解放后，大院分配给民众居住。2012年1月因改造驻藏大臣衙门遗址，将居住在这个大院的144户居民整体搬迁到了贡布塘的现代化公寓。
雍正五年(公元1727年)，清内阁学士僧格、副都统马喇来到西藏，办理西藏事务，次年宣布为参与西藏的日常管理(新功能异于以前的留守大臣)，自此开启了近两个世纪的驻藏大臣制度。宣统三年，这项制度停止，共历经180余年，驻藏大臣制度在清朝历史上发挥了重要而深远的影响。
