熊本市の東はずれ、秋津町沼山津にある横井小楠の住居。小楠は安政２年（１８５５）から明治元年（１８６８）維新政府に招かれて上京するまで、福井藩に招かれていた間を除く前後８年をここで暮らした。その間、塾を構えて門弟の指導にあたり、幕末の志士、坂本龍馬らも訪ねて来ている。ここから眺める景観が四季折々素晴らしいことから、四時軒の名が付いたとされている。昔のままの姿を残す座敷を中心に、昭和５７年（１９８２）記念館とともに復元され、小楠ゆかりの資料が展示されている。