Lugar de confinamiento de la Reina Isabel I de Escocia
Tras la expropiación a los Templarios, Eduardo II, el Rey de Inglaterra, se hizo cargo de los derechos señoriales. Les dio las pertenencias de los Templarios a los Caballeros Hospitalarios, excepto Bisham, que se lo quedó. En 1310 fue utilizado como lugar de confinamiento para la Reina Isabel de Escocia, su hijastra, la princesa Marjorie, y su cuñada, la dama Cristina de Carrick. Fueron capturadas en la isla de Rathlin durante las Guerras de Sucesión de Escocia, hasta que fueron liberadas en1314.