颐浩禅寺,始建于宋景定元年(1260),相传以宋宰相吕颐浩故宅为寺而得名,旧名草庵,又名永安庵。宋高宗南渡时,曾驻跸于此,易庵为寺,御书赐额“永安寺”。由大书法家赵孟頫题寺额。明洪武中,僧大渊曾予修葺,明代书法家文征明书“方丈”匾,证明寺院已有相当规模,号称可居千僧。至明清时,寺院已经荒芜。清顺治、乾隆、光绪年间几次重修,但规模均已不及当初。