Schloss Kastelbell wurde 1238 erstmals erwähnt, ist aber wahrscheinlich schon früheren Ursprungs. Es wurde von den Herren von Montalban erbaut. Dieses einst sehr mächtige Adelsgeschlecht wurde nach 1200 von den Grafen von Tirol bekämpft. Das Schloss liegt malerisch auf einem mächtigen Felsblock, der am linken Ufer der Etsch aufragt, wo diese aus der Schlucht der Latschander das weite Untervinschgau erreicht. Der Felsen ist nicht hoch, fällt aber gegen das Tal so steil ab, dass die Burg von dieser Südseite einst als von der Natur gesichert gelten konnte.
Die ältere Burg nahm nur die Mitte des Felsens in Anspruch und war klein. Die langgesteckte Anlage, die die Burg seit dem 16. Jh. zeigt, mißt über 70 m in der Länge und kaum 30 m in der Breite. Wegen seiner Lage musste Schloss Kastelbell im Laufe der Jahre gegen den Berg zu immer wieder von neuem durch
den Bau modernerer und stärkerer Wehranlagen geschützt werden.