虞山公园位于常熟城北虞山山麓。依山傍城,秀木拥翠;亭、榭、桥、廊,各得其所;池、泉、石、径,曲尽其妙。山野风光,匠心建筑。是江南独具城市山林优势之综合性公园。正门临北门大街,为旧时半巢居及陈家山门处。民国20年(1931年)建园,初名常熟公园。其时城西隅尚有逍遥游公园,原为明嘉靖年间大学士严讷读书处,曾一度改名为虞山公园,后渐衰落而不存。常熟公园俗称为新公园以示区别。
此园倚山并沿城墙构筑,紧靠虞山东麓。景观随地形起伏跌宕,建筑物错落层叠,间以林木泉石,自然风光与人工点缀浑为一体。全园分前、中、后三部。前部有景点倚晴楼、栗里茶室和卷云石;中部以水面为中心,是全园景色精华,亭、榭、曲桥四布,富有江南园林特色;后部虞山亘绵,秀木拥翠,以自然山石为主,山野韵味甚浓。1948年汪青萍《常熟手册》曰:“公园在旱北门内,依山傍城而筑,风景具天然之胜。亭榭点缀,栗里环翠,茶居遥对,游人憩息所也。”旧时景点主要有中山厅、民众教育馆、北廊草堂、湖心亭、九曲桥、双茆亭、挹秀山房、新亭、栗里、环翠小筑、饮绿轩等。至解放前夕,园景荒芜已甚。
1950年更名为人民公园,此后陆续整修湖心亭、九曲桥、双茆亭,重建公园大门、环翠小筑,新建挹翠亭、支边亭、听松亭、忠王碑亭、夕照榭诸景,并辟书亭、儿童乐园等。1960年建虞红亭。1979年起,又重建栗里茶室,设王石谷亭,新建倚晴楼、半山轩、花木商店,开辟花圃建温室。1984至1985年建“倚晴园”,园内建归飞亭、晚翠亭;半山轩处建爬山廊,扩建儿童乐园,辟盆景园。1984年4月,复名为虞山公园。此园不仅是居民休闲、娱乐的综合公园,也是虞山风景区的主要组成部分。