北投温泉は私も行きました。
位置関係を無理矢理東京にあてはめると、
山手線内から見て新木場辺りに箱根並の温泉街がある感じでしょうか？
ただし、台湾の公衆浴場は水着着用です。
日本的風情を味わうなら、家族風呂の予約をお勧めします。
2014年台北温泉祭り
http://taiwantoday.tw/ct.asp?xItem=222596&ctNode=1904&mp=1001
（路線図）
http://www.go-taiwan.net/index.php/taiwaninfo/sub-transportaion/map/54-subway-map.html
図の上側「新北投」駅が温泉街最寄駅です。