Wer die Burg erbaut hat, ist nicht bekannt. Es ist urkundlich lediglich belegt, dass in den Jahren 1361 bis 1370 Herzog Friedrich von Teck die Burg wieder aufbauen ließ.
Sie wurde jedoch wieder von Schorndorfer Bauern im Jahr 1525 zerstört, bzw. abgebrannt.
1575 baute Haug Erkinger, Herr von Rechberghausen, mit seiner Frau Susanne von Welden die Burg um und erweiterte sie. Es entstand eine dreiflügelige Anlage.
Innen ist das Schloss mit großen Wohnräumen versehen.
Dieses alte Schloss ist vermutlich durch Blitzschlag zwischen 1681 und 1690 bis auf den Torturm und die Schlosskapelle abgebrannt.
Nach langjährigen Renovierungsarbeiten wurde die Schlosshofkapelle 1999 wieder eingeweiht.
Das heutige Rathaus, das sog. Neue Schloss, wurde 1721 von Graf Alois Clemens von Rechberg mit den Steinen des alten Schlosses erbaut. Jedoch wurde es nie von rechbergischen Grafen bewohnt, in deren Besitz es 1789 kam.
(Quelle http://www.rechberghausen.de)
09.06.2012