南関御茶屋跡は、嘉永5年（1852年）に完成したものです。現在主要な建物一棟と心字をかたどった池を配した庭園が残っています。当時の参勤交代の際に、大名行列がこの南関を通り、藩主はこの御茶屋を利用したと記録には見えます。御茶屋に関する建物が現存するのは県内でも唯一で、平成15年（2003年）に国の史跡に指定された貴重な文化財です。また、九曜紋の鬼瓦や釘隠しが現在も残っており、細川家とのゆかりを思い起させます。