地名の由来は、赤玉石を産するところからとも,褐鉄鉱を産するところからとも、常陸国赤谷城主の一族が移住してきたところからともいう。
寛文元年関所が置かれ、上番1名・下番3名が常駐した。地内に赤谷街道が通じ、宿場を形成した。街道両側には松川屋・吉野家・中村屋・小川屋・亀屋・角屋・大坂屋などが軒を並べた。