山门在辛峰东侧，正处于望海墩（虞山最高峰）和城内方塔的连线之上，可见先人选址之用心。在民间传说中，古城与虞山的关系更为有趣——虞山（卧牛山）是下界神牛，辛峰是牛头，辛峰亭是牛角，方塔是栓牛之桩，腾山而起的城墙便是栓牛的缰绳了。神牛既留，瑞气永聚，常熟当然是年年丰收了。常熟城墙建于南宋建炎年间。至正十六年，张士诚占领常熟，把土城墙改为砖砌，以加固城防。明嘉靖年间，倭寇常通过长江潜入，劫掠常熟沿江村庄，渐有掠城之势。时任常熟知县王鈇发动民众捐款筑城，并改虞山门为镇山门，以振威武之气。现存的过山城墙修于1993年—2006年城高7.68米，宽5.44米。虞山门上建有重檐式城楼，古朴轩昂，威武俊明。
虞山城墙
