En1884, Alfonso XII dio orden de levantar un nuevo edificio, debido a las continuas protestas por parte de los madrileños, que vivían cerca de la RFT.
En esa época Madrid sufrió una remodelación urbanística, motivada por la Revolución Industrial.
Fue entonces cuando la RFT se trasladó a la actual sede de Fuenterrabía, 2, en el barrio de Retiro.
El edificio neomudéjar fue seleccionado dentro del Plan del Patrimonio Industrial por el Instituto de Patrimonio Histórico Español, y declarado Bien de Interés Cultural por la Comunidad de Madrid en 2006. Los méritos para tal reconocimiento radican no solo en el interés arquitectónico del inmueble, sino en el hecho de que el edificio continúa cumpliendo las mismas funciones para las que fue creado originalmente: la fabricación y restauración de tejidos de alta calidad.
Jardín textil tintóreo
Un jardín histórico de la Real Fábrica de Tapices que se encuentra situado en el centro del recinto.