Budova Willmadeské školy byla původně královský hrad vystavěný v roce 1238 na povel krále Kingsleyho I. a stavěl se asi patnáct let. Tento hrad se nacházel na Wilsonově poloostrově, úzkém kusu země připojeném k ostrovu uzoulinkým proužkem širokým sotva pět metrů.

Pro královský hrad to bylo perfektní místo. nemohli na něj táhnout moc velké legie, protože by procházeli přípojem velmi dlouho a ochraná četa by je mezitím porazila a zahnala.

Sloužilo to jako hrad až do roku 1580. Poslední král, který bydlel v tomto hradě byl Evanesence I., z jehož hrůzovlády má ještě dnes nahnáno většina Willmadeanů. Po jeho smrti nechtěli lidé zanechat ani stopu o jeho existenci a tak hrad vypálili. Ovšem stavba stále stála pohromadě, jen uvnitř bylo všechno vypálené. Lidem zůstala na několik let naprosto nevyužitelná stavba, která vypadala, že sotva drží pohromadě. V roce 1583, když nastoupil na trůn Albert IV: Talentovaný, kterého ta skoro zřícenina trochu znervozňovala, tak se začalo něco dít. Tento král si zavolal dva nejbohatší muže Willmadeu, Augustuse Herveruse Svasila a Williama Chytrola a společně přemýšleli, co s touto stavbou udělat. Nakonec dospěli k rozhodnutí, že založí školu. V roce 1584 svolali všechny dělníky a lidi, kteří si potřebovali přivydělat a začalo se rekonstruovat. Bylo vyřezáno několik set tun dřeva do nábytku( mimochodem důvod, proč nejsou na Willmadeu žádné lesy) vypáleno několik tun železa a zlata. A v roce 1597 bylo hotovo. Škola byla větší než hrad a také mnohem modernější, co se týče vzhledu. Ani ne měsíc na to jsou ve škole první studenti a škola je oficiálně uvedena do provozu. Sám Albert IV. se ve škole zdržuje velmi často a studenti se s ním setkávají skoro denně. Stává se z něj nejoblíbenější král vůbec.Školu ovšem hned po dvou měsících poznamenává tragédie a sice smrt Williama Chytrola. Albert IV. se snaží o to, aby se studenti s jeho smrtí vyrovnali a škola mohla fugovat dál, protože sám Chytrol by si to určitě přál. V roce 1603 však umírá i Augustus Svasil. Byl to takový středověký kulturista a jeho srdce tu váhu svalů už prostě neubilo a tak dostal infarkt. Albert IV. vede tedy celou školu sám až do své smrti roku 1608. Po jeho smrti se ujímá vedení jeho syn Robert I.

V roce 2013 byla škola kompletně zrekonstruována a zmodernizována do dnešní podoby. Ale jména kolejí se samozřejmě dochovala jen už nejsou oficiální. Jmenují se teď 1.kolej, 2.kolej a 3.kolej, ale všichni jim už navěky budou říkat Chytrol, Svasil a Talent.