蒋氏故居的主人蒋寿山，人称蒋百万，是晚清南京著名的富商。据说他为淮阴清江浦人，生于清道光八年（1829年），家中贫寒，小时候给人家看驴子，后来靠赶毛驴发家致富。因此南京人又称他为“蒋驴子”，又因他十分富有而称其为“蒋百万”。
蒋百万虽百万富翁，但为人善良，常常捐资修桥铺路，赈济灾民，也曾冒着危险资助太平军死难将士的遗属。蒋百万在南京有多处房产，其中最具特色的是这座故宅，原有房屋九十九间半，两个院落，有轿厅、大厅、楼房和外园，以风火墙相围。现外墙内砌有石碑一块，光绪元年（1875年）四月建。一边六进，每进三楹，每五进为大厅，厅上有楼，门窗木雕，尚存局部。现为省级文物保护单位。
蒋驴子故居位于今秦淮区位于城南三条营二十号的蒋寿山故居主人，就被人戏称“蒋驴子”。相传清朝咸丰年间，蒋寿山随父流落南京以赶驴为业，太平军攻破南京后，蒋驴子投军养马，被忠王李秀成赏识，升为驴马总管。据说后来他得到太平天国的窖藏，而富甲江南，人称蒋半城。