Het gebouw werd in 1888 gebouwd door Jan de Kruijff en deed tot 1962 dienst als linnenweverij onder de naam H.C. van Hoven Linnenfabriek. De naam die het bedrijf reeds had toen het met de toenmalige eigenaar Herman van Hoven in ons Heemhuis was gevestigd. Het was ooit een weverij van kwalitatief hoog niveau die jarenlang het predicaat Hofleverancier mocht voeren. Nadat het pand nog enkele jaren gebruikt werd als kantoor en opslagplaats werd het in 1964 verkocht aan de gemeente Nuenen c.a.
Zo werd ’t Weefhuis op 8 november 1972 officieel geopend door burgemeester jhr. mr. J.J. Smits van Oyen en had Henk Smolders er bijna 20 jaar zijn architectenbureau en internationale kunstgalerie.
In 1989 nam Rob Sanders het galeriestokje over, die het in 2000 op zijn beurt weer doorgaf aan Thea Eijk en Oscar Meijn, die in 2010 de galerie hebben verlaten. Sinds die tijd is het door de gemeente niet meer verhuurd en staat het grotendeels leeg.
Wat de toekomst van dit unieke historische gebouw is?