w tym punkcie spotkał się z dużą opozycją wewnętrzną. W marcu 1455 r. król zwołał Kortezy do Cuellar w Segowii, aby przedstawić swój nowy program polityczny. Na tym posiedzeniu zabłysła gwiazda Juana Pacheco, który jako królewski faworyt przejął faktyczny ster rządów i utworzył krąg wiernych sobie możnowładców, w tym swojego brata Pedro Giróna i hrabiów Plasencia i Alba.
W 1455 r. rozpoczęły się operacje wojskowe przeciwko emiratowi Grenady, które zaangażowały znaczne zasoby ludzkie i finansowe królestwa. Spotkały się one z dużą niechęcią wielmożów i wyższego duchowieństwa. Notable kastylijscy i arcybiskup Toledo Alfons Castillo oskarżyli króla o sprzeniewierzenie funduszy uzyskanych na ten cel podczas zgromadzenia w Cuellar.
W stanie kompletnej anarchii w 1464 r. w Ávila magnaci na czele z arcybiskupem Toledo Alfonsem Carrillo i znajdującym się w królewskiej niełasce markizem de Villena Juanem Pacheco zdetronizowali króla na rzecz jego przyrodniego brata, Alfonsa, który był powolny ich życzeniom i który został przez nich ogłoszony królem podczas ceremonii, która znana jest w hiszpańskiej literaturze historycznej jako „farsa z Ávila”. Jednocześnie odrzucili pretensje do tronu córki króla, Joanny, twierdząc, że jest ona owocem związku królowej Izabeli z nowym królewskim doradcą, Beltranem de Cueva.