嘉定十七年（1224年）闰八月，宋宁宗赵扩去世。当年冬，新即位的
赵昀皇帝命
吏部侍郎杨华为按行使，踏看宁宗墓地。杨华经过考察最终选择了泰宁寺一带为风水宝地。
因此泰宁寺附近一带近30里划归陵区，禁止伐樵开山，迁移村庄。泰宁寺整体搬迁至白鹿山南麓。理宗诏迁泰宁寺，寺址建宁宗陵墓，将宁宗梓宫暂时安置于此地，并命陵名日“永茂”。
南宋灭亡后，
江南释教总管
杨琏真迦和
宋六陵附近的一帮僧人勾结，开进绍兴宋陵，用刀逼迫守陵官罗铣离开，随后展开
盗墓行动。盗贼们首先发掘了
赵扩，
赵昀，
赵禥，杨后四陵。永茂陵自然难逃厄运。
明朝建立后，
朱元璋派人修缮南宋诸帝陵寝，并派专人看守。到了明朝中后期及以后，陵墓逐渐荒芜破败。