Petite partie de terre argileuse appartenant à la Forêt de Soignes, le Bergoje en a été séparé en 1729 lors de la construction de la chaussée reliant Bruxelles à Wavre. Au début du 20ème siècle, il y avait, tout en haut du site, une imposante demeure bourgeoise, la
Villa de la Bruyère, entourée d'un vaste jardin. C'est dans la propriété de cette villa démolie en
1986 qu'à été créé le quartier du Clos du Bergoje.