落合村落位于东祖谷的中央部位，自祖谷川和落合川的交汇处沿山的斜面向外扩展。该村落的起源不明，但祖谷地区有平氏家族残兵的传说和开垦土地的传说。村落内的高低差高达390米左右，该村落就坐落在这个倾斜度很大的地方。
自江户中期至昭和初期修建的民房以及用一块块石头垒砌而成的石墙和田地等景色，形成了令人怀旧的原始的山村景色。
2005年被指定为国家珍贵传统建筑群保存地区