Restauré au 20ème siècle, ce parc montois abrite les nombreux vestiges de l'ancien château-fort des Comtes de Hainaut (11ème - 14ème siècles), dont la remarquable Chapelle St Calixte (11ème-12ème siècles) - réhabilitée en musée du site, la Tour César, les caves souterraines (12ème-13ème siècles) ainsi que le buste de l'écrivain Charles Plisnier (Prix Goncourt en 1937). Ce square offre également un point de vue panoramique inégalable sur le paysage environnant, jusqu'à la frontière française.