Escriure una continuació per a aquest paràgraf - La família Güssen es va fer massa pobra per mantenir el castell, i el 1613 va vendre tot el poble i el castell al Ducat de Württemberg. El 1617 el duc Julius Friedrich von Württemberg va prendre els pobles de Brenz i Weiltingen sota el seu control, fundant la línia juvenil de Württemberg de Württemberg-Weiltingen. Schloss Brenz va ser utilitzat com a llar temporal per a la seva família. No obstant això, el castell danyat va ser destruït el 1634 durant la Batalla de Nördlingen
de la Guerra dels Trenta Anys. El 1672, el duc Frederic Ferran va fer reconstruir el castell en un estil renaixentista. Els fonaments de l'antic castell i algunes parts de les parets encara són visibles, però la major part del castell va ser construït nou.