O Art de Séjour está situado em Porte Saint-Jacques, na vertente sudoeste onde, no século XIII, foram erguidas as primeiras muralhas de Bruxelas.
A cidade rapidamente cresceu e, em 1356, teve início a construção das segundas muralhas de Bruxelas.
As primeiras muralhas foram derrubadas no século seguinte.
Restam apenas alguns vestígios das primeiras muralhas. Por exemplo, o Tour de l’Angle, a 450 metros do Art de Séjour.
O rio Zenne atravessa o centro de Bruxelas.
No século XIX, o rio foi coberto por alamedas.
Nos mapas antigos, é possível ver que o rio Zenne era constituído por duas pequenas ilhas.
Uma maior em St-Gery e outra pequena, onde está hoje situado o Art de Séjour (ver estrela amarela).