1237年（嘉禎3）三代執権北条泰時が義母の供養のために建てた粟船御堂がはじまり。常楽寺の寺名は、泰時没後、その法名をとってつけられた。建長寺開山蘭渓道隆が、建長寺が建立された1253年（建長5）まで、ここに住んでいたことでも知られ、仏殿には、本尊の阿弥陀如来像とともに蘭渓道隆像が安置されている。