Kerja-kerja tanah yang utama dan beberapa batu tetap dari ini castle Norman yang awal, dibina sekitar 1170-80 oleh William de Warenne, Earl Surrey dan Ketua Justiciar kepada William penakluk itu. Bank-Bank besar bumi mengelilingi bailey yang, dan pada satu hujung adalah motte dengan tinggalan Simpan satu. Ini pada asalnya adalah Dewan de Warenne, yang dikelilingi oleh bank ringwork mudah. Beberapa waktu sekitar 1140, semasa perang saudara pemerintahan Raja Stephen, motte yang dibesarkan sekitar dinding diperkukuh Dewan yang menjadi asas bagi yang lebih kukuh, walaupun mungkin tidak pernah selesai, terus. Apabila Raja Henry II datang ke takhta yang Simpan telah dirobohkan, bersama-sama dengan banyak lain tidak berlesen peristiwa yang telah muncul di seluruh negara semasa konflik.