Το κάστρο είναι γνωστό και σαν Castello Neuhaus το σημερινό όνομα στην πραγματικότητα είναι η απόδοση του ονόματος από τα γερμανικά στα ιταλικά πριν τον Β' παγκόσμιο πόλεμο από την φασιστική κυβέρνηση της Ιταλίας. Με την ονομασία Neuhaus ήταν γνωστό στον μεσαίωνα το Καστέλο Τούρες, στους άρχοντες του ανήκε το Καζανόβα.
Το κάστρο χτίστηκε μεταξύ 1240 και 1245 από τους άρχοντες του Τάουφερ, σε περίοδο πολέμου κατά των αρχόντων της Ροντάνκ (Rodank). Το 1248 αναφέρεται ότι ο μητροπολίτης του Μπρίξεν ζήτησε την κατεδάφιση του αλλά αυτό δεν έγινε. Με το πέρασμα των χρόνων το κάστρο πέρασε σε παρακμή κι άλλαξε πολλούς ιδιοκτήτες έως το 1914 που έγινε ανοικοδόμηση του.
Στην πλατεία κάτω από το κάστρο, χτίστηκε το 1601 ένα μικρό εκκλησάκι, ενώ το παλάτι του κάστρου ξαναχτίστηκε στις αρχές του εικοστού αιώνα. Το 1752 αναφέρεται ιδιοκτήτης του ο Count Künigl όπου έχτισε την κατοικία του στις πλαγιά του λόφου σε στυλ μπαρόκ. Έπειτα πέρασε στην ιδιοκτησία οικογένειας καλλιτεχνών και χρησιμοποιήθηκε σαν εργαστήρι, και το 1924 στην ιδιοκτησία του Κόμη Cäsar Straßaldo-Grafenberg .
Στο κάστρο φιλοξενήθηκε την περίοδο 1422-1426 ο Όσβαλντ φον Βολκενστάιν(Oswald von Wolkenstein), ένας από τους πιο διάσημους ποιητές και συνθέτες του δέκατου πέμπτου αιώνα στην Αυστρία. Έγραψε για το τοπίο και τις όμορφες γυναίκες της κοιλάδας Τάουφερ (Tauferer).[4]