Van het oorspronkelijke Huis De Ulenpas is niet veel meer terug te vinden. In 1400 verkoopt Diederik van Baak het huis aan Herman Rouwenoort. De Ulenpas werd waarschijnlijk rond 1660 herbouwd. De Van Rouwenoorts blijven eeuwenlang bezitters en bewoners van de Ulenpas. In 1812 wordt het Huis vererft door huwelijk van een erfdochter aan de Van der Borchs tot Verwolde en daarna aan de Van Schuylenburchs. In 1965 breekt er brand uit, waarbij het huis grotendeels uitbrandt.
Vanaf de weg tussen Hoog-Keppel en Achter-Drempt kunt u het gebouw vanaf de weg zien. Het huis en de directe omgeving zijn niet toegankelijk voor het publiek.