島の東側にある笠島集落は、国の伝統的建造物群にも選定された古い町並みが今もなお残されており、独特の白壁や古い土塀が落ち着いたたたずまいをかもしだしている。マッチョ通り、東小路筋など街路は複雑に入り組んでおり、ちょっとした迷路気分である。これは外敵をまどわすために構成されたもので、離島の小規模集落としては全国的に珍しい。　毎年11月23日に「笠島ふれあい祭」が開かれている。