しかし5人はバラバラに行動してまとまりに欠け、数年で次々とメンバーが死んだこともありカスティーリャは乱れた。まず1313年に母が急死、続いてナスル朝グラナダに介入し支配下の町を攻略していたペドロとフアンが1319年にグラナダの反撃に遭い敗死した。1321年に祖母も亡くなり後見人はフアン・マヌエルしかいなくなってしまった。