n 1634, Honorat de Bueil, poète et seigneur de Racan, nom qu' il associe à la Roche, entreprend la construction d' un château à l' emplacement du "chastel et maison seigneuriale" tel qu' on le qualifiait en 1600. De cette construction primitive pourraient subsister des traces d' appareillage dans le soubassement de la tour polygonale.
L' ensemble de la construction au 17e siècle, placée perpendiculairement au coteau est ainsi décrite dans l' aveu de 1711 : "le dit chastel consistant en un grand pavillon avec tourelle au coin de celui ci, un autre pavillon servant de chapelle, entre lequel pavillon, il y a un grand corps de logis et plusieurs autres bâtiments". Parmi les ouvriers revient souvent le nom de Jacques Gabriel, qualifié de maître maçon, puis de maître architecte en 1652.