明朝滅亡之後,河南衛輝潞王府被清朝拆除,拆下的主要建築材料被運往北京。此外戶部還指示河南布政司,把潞王府所擁有的商鋪、土地都估價賣掉,但潞王陵地面上建築綠瓦石壁,雕龍鐫鳳,都是皇家才準許用的,普通老百姓誰也不敢買,因此得以保留。直到順治五年,僧人真息從五臺山來到這裏,看到潞王陵建築雄偉堅固,打算買下來改造成寺廟。順治十三年,真息用募集來的480兩銀子把潞王陵買下,然後把祾恩殿改為佛堂,重新命名為萬聖庵。 真息則是萬聖庵第壹代住持,法號戒如,在真息經營萬聖庵期間,潞王陵建築由於風刮雨淋出現損壞,他都“次第修理”。同時潞王陵也因為改成萬聖庵而得到修葺和保護,直到康熙末年,潞王陵仍然“殿宇巍然”。
1937年,抗日戰爭全面爆發後,豫北新鄉壹帶政局極其混亂,國民黨地方政府撤退,土匪蜂起。有土匪覺得正可以渾水摸魚,發筆橫財。據老人們回憶,當時主要有兩股土匪盯上潞王陵,壹股是新鄉西邊秀才莊、塊營村土匪,壹股是北山上土匪。 兩股土匪分別派人到潞王陵勘察地形,準備下手。但這些跡象被守陵人後代聚集的墳上村村民發現,村民們覺得,憑自己力量保護不了潞王陵,但眼睜睜看著土匪把寶貝盜走,大家又不甘心。經過深入討論,最後在村中大戶主持下,村民們決定與其讓土匪把寶貝盜走,不如自己把寶貝挖出來。
1937年底,河南新鄉墳上村全村動員,同時把明朝潞簡王朱翊镠墓和次妃趙氏墓挖開,由於墳上村人是當年守陵人後代,又自幼生活在鳳凰山下,擅長開山取石,地宮半尺厚的封門大條石根本擋不住他們,村民們沖進潞王墓和次妃墓,拿走了兩墓內的主要隨葬品。當年目擊過的老人回憶說,從墓裏挖出來的主要有金冠、大個頭金銀元寶、珠寶首飾等,用農村裝糧食的那種布袋,壹共裝了大半布袋。 就在墳上村村民挖開潞王墓之後不久,土匪就來了。土匪封鎖陵區,然後對兩墓進行最後掃蕩,在土匪盜墓之後,附近村民不斷由盜洞進入地宮尋找殘余寶物,因此潞王墓和次妃墓被盜得十分徹底。 潞王墓的隨葬品挖出來後,被分散保存在墳上村幾個大戶家裏。後來因為對這些東西分配不滿,有人到當時日偽地方政府去告狀。於是,日偽政府到墳上村抓走了幾個帶頭參與挖墓的村民。在嚴刑拷打之下,這幾個村民交出部分寶物。日本投降後,國民黨新鄉縣政府為挖墓之事又把墳上村幾個帶頭村民抓進去,家人多方送禮,這幾個村民才被放出來。至於潞王墓中那些隨葬品下落,最後誰也說不清了。