熊毛半島の南端にあり、海岸線まで山麓が及び海岸に沿って集落が続く。 室津の地名は、「両岸対するの津によって諸呂津といえり」とある。 古来より瀬戸内海交通の要衝であり、近世には瓦屋と茅屋の入り混じった人家が稠密に建ち並び諸国の廻船が出入りし米穀などの諸品の売買が盛んで問屋や遊女茶屋もあったという記録がある。