常乐禅院位于象王峰东麓，原名常乐庵。据清康熙《商海普陀山志》等记载，清康熙中（1699-1709）普济寺监院海安创，道光（1821-1850）后废。民国二年（1913）僧根常重建，未竣，僧了尘续建之。民国十九年（1930），监院根明翻造。

新中国成立初，根明等5僧居之。1985年中央办公厅、国务院办公厅文件批复，将常乐庵划归普陀山佛协管理使用，整修后作尼众养老院。

1994年重建大殿、库房及客房，1995年新建斋堂、大修东西厢楼，1996年拆建外山门。院内天王殿3间；圆通宝殿3间，中供香樟木雕贴金毗卢观音座像，两旁善财、龙女；后两边文殊、普贤菩萨；两壁为十八罗汉。大殿东侧墙间竖“了尘上人重建常乐庵赞碑”，民国二十年（1931）郭慧海撰文；山门对面照壁镌“南无观世音菩萨”。山门外院额为民国十三年（1924）密显书。

常乐禅院山门工艺精湛，顶饰花脊、龙吻，保留民国时期建筑特色，2010年5月公布为市级文物保护单位。