Le premier château connu sur ce site fut probablement bâti vers le milieu du 17e siècle pour l'abbé Charles Le Prevost qui fut le seigneur de Vanves de 1638 à 1661 ; le château comprenait un jardin régulier, un jardin potager, une terrasse, une cour, une ferme, le logement des domestiques, une fabrique de jardin, une glacière, une orangerie, un bassin, un abreuvoir, une fontaine, une remise, un cellier, une grange, une bergerie, une porcherie, une étable à chevaux, une étable à vaches, un poulailler, un colombier, un fournil, un pressoir et une laiterie ; en 1655, Claude Le Bas de Montargis acquit la seigneurie de Vanves ; tout en conservant l'Ancien château de Le Prevost il demanda à son beau-père, l'architecte Jules Hardouin Mansart, de lui bâtir un nouveau château qui fut achevé en 1704 ; le domaine est vendu comme bien national en 1792 et racheté en 1799 par le collège Louis Le Grand qui en fait sa maison des champs ; en 1853, le lycée Louis Le Grand transforme cette maison en petit collège en transférant à Vanves les classes élémentaires ; en 1859, on ajoute au pavillon de Mansart 2 ailes en retrait et 2 préaux, en 1862, on élève une infirmerie et l'architecte Louis Joseph Duc bâtit une chapelle, émancipé sous le nom de lycée du prince impérial en 1864, le lycée de Vanves s'agrandit en 1866 par la construction du moyen collège doté de bains douches et celles en 1868 d'un gymnase et d'une salle de spectacle dus à Louis Joseph Duc, en 1871, sous la commune un assaut de versaillais incendie une partie du lycée ; l'architecte Alfred Normand construit une pisciné en 1878, la même année est bâti un manège d'équitation ; de 1883 à 1887, l'architecte Alfred Normand élève le grand collège comportant : une blanchisserie, une bibliothèque, une buanderie, des ateliers et une serre, il élève aussi une nouvelle infirmerie ; en 1899, le château de Le Prevost devenu ferme du lycée est vendu pour un lotissement ; en 1935 est bâti la conciergerie