Kasteel Renswoude, ook wel Borchwal genaamd, werd gebouwd tussen 1350 en 1375. In 1623 is het kasteel al vervallen als Johan van Reede de eigenaar wordt. Deze gereformeerde kasteelheer vond een kerk belangrijker dan de herbouw van zijn eigen kasteel. Het huis op zijn landgoed waar protestantse samenkomsten werden gehouden was te klein geworden. Hij bouwde zijn eigen kerk vlakbij het kasteel waarna hij het oude slot liet afbreken en het huidige kasteel liet bouwen. Dit kasteel werd waarschijnlijk gebouwd door de Utrechtse bouwmeesters Gijsbert Theunisz. van Vianen en Pieter Jansz. van Cooten. Het hoofdgebouw bestaat uit twee grote dwarshuizen, die evenwijzig tegen elkaar aan liggen. In feite is het huis maar twee kamers diep, maar de midden- en hoektorens geven het een kasteelachtige aanzien.
Op 28 november 1985 ging de zolderverdieping in vlammen op, waarbij de drie bovenlagen van de toren en het gedeelte waar zich de eetkamer bevond het moesten ontgelden. Al de volgende dag begon men met het oprichten van steigers. Ondertussen is het kasteel weer volledig gerestaureerd.