An caisleán a tógadh ar dtús i 1350 ag Dirk van Herlaer ar feadh an abhainn Maas. Ammersoyen a bhí ina leith chaisleán mar a bhí sé tógtha ag baint úsáide as a seasta plean, a bhí murab ionann agus eile caisleáin a tógadh le linn na ré seo. An dearadh san áireamh ceithre sciatháin a bhí tógtha timpeall ar lár na cúirte. Gach cúinne bhí a chuid féin trom túr le haghaidh cosanta breise. An caisleán san áireamh teach geata agus bhí ar dtús timpeallaithe ag móta. Ag an am, bhí sé ar cheann de na fearr struchtúir cosanta sa tír. I 1386, an caisleán a bhí caillte a Diúc Gelderland a thug an caisleán a mhac tabhartha. Sé ansin a dhíoltar an caisleán i 1424 a Johan van Broekhugen, Tiarna na Waarenburg. Le haghaidh an chéad cheann eile ceithre chéad bliain, an caisleán ach amháin a mhalartú ar a lámha trí oidhreacht. Ar fud stair an chaisleáin a bhí léigear arís agus arís eile le 1513 agus 1574 bheith ar roinnt de na níos suntasaí imeachtaí. An caisleán d ' fhulaing an damáiste is mó i 1590 nuair a bhíonn an caisleán úinéir Joris van Arkel maraíodh as a chuid díobhálacha. Tar éis a bháis, an caisleán thit isteach i ruin go dtí an 17ú haois nuair a bheidh an Veain Arkel teaghlaigh a ardaíodh ar deireadh go leor airgid a chur ar ais ar an chaisleán. Thomas van Arkel íoctha na fraince 7,000 guilders a shábháil ar an caisleán den iarla sa bhliain 1672 nuair a bheidh an Fhrainc swept tríd an Ollainn agus dóite go leor caisleáin feadh na slí. An caisleán d ' fhéadfadh a bheith slán, ach Thomas fhan sa fiach agus bhí riamh in ann a chríochnú an caisleán athchóiriú. Tar éis a bháis, bhí an caisleán mar oidhreacht ag teaghlaigh eile. An caisleán a bhí ansin a dhíoltar leis an Eaglais Chaitliceach Rómhánach i 1876 agus bhí in úsáid mar an chlochair. Le linn an dara Cogadh Domhanda, baineadh úsáid as an caisleán mar foscadh le haghaidh a n-áitritheoirí sráidbhaile. Nuair a bhí an cogadh os a chionn, baineadh úsáid as an caisleán mar halla sráidbhaile go dtí go raibh sé ceannaithe ag an Gelderland Caisleán Muinín i ndeireadh na 1950í. Tá sé ós rud é gur cuireadh ar ais ar a iar-mheánaoiseach ghlóir.