Per a ningú no és un secret que el príncep Andreu va ser, durant molts anys, el fill predilecte de la reina Isabel II. La morta monarca solia complir-li tots els capricis al germà petit del rei Carles III, però això va acabar quan el duc de York va ser relacionat directament pels casos d'abús de menors a l'illa de Jeffrey Epstein, sent acusat i demandat per Virginia Giuffre, una jove que va ser víctima de la xarxa de tràfic de menors d'Epstein fa més de dues dècades. Després d'aquest terrible escàndol per a la Corona britànica, tant el llavors príncep Carles, hereu de la Corona, i el seu fill, el príncep William, van convèncer la reina perquè li retirés els seus títols reals, perdent la seva posició en la família. Tanmateix, el príncep Andreu tenia l'esperança que aquesta decisió canviaria amb el pas dels mesos, però Carles III va ser molt ferm i en una reunió molt tensa que va sostenir amb ell a Escòcia li va donar a entendre que mai no recuperaria la seva posició al Palau.
I és que, el duc de York era totalment confiat que podria recuperar la seva vida i els seus títols en haver evitat un judici mediàtic amb Giuffre en arribar a un milionari acord amb la víctima, ja que, d'acord amb una font propera la Casa Reial, Andreu considerava que ell "encara pot ser valuós com a membre actiu de la Corona". Tanmateix, el nou monarca no considera que això sigui així, per la qual cosa va decidir intervenir en l'assumpte en negar-li qualsevol possibilitat de tornada a les seves tasques dins de la monarquia en una reunió que ha estat catalogada com "tensa i emocional".
D'acord amb el 'Daily Mail', el duc de York va quedar "en xoc i plorós" després de les fortes paraules del seu germà en aquesta conversa que es va dur a terme a la finca Birkhall, Escòcia, propietat de Carles III, tan sols uns dies abans de la mort de lsabel II.
El príncep Andreu va perdre totes les esperances de recuperar el seu estatus dins de la Família Reial
Segons el biògraf Robert Hardman, "Andrés sempre va creure que hi havia un camí de retorn", ja que la reina Isabel II "sempre va confiar en la innocència" del seu fill. Tanmateix, aquesta esperança s'ha esfumat amb l'ascens al tron de Carles III, que no està disposat a tolerar que es continuï fent malbé la imatge de la Família Reial per les accions indegudes del seu germà. "En la reunió, Carles li va dir que pot anar-se'n i tenir una bona vida, però que la seva vida pública com a membre de la reialesa està arribant a la seva fi. Li va dir: 'Has d'acceptar-ho".
D'aquesta manera, el príncep Andreu no només va perdre els seus títols i patronatges, també va perdre el dret de ser cridat com 'Sa Altesa Reial', no podrà utilitzar els seus vestits ni medalles militars i tampoc no formarà part del Consell d'Estat, sent l'únic dels fills de la morta monarca que no formarà part d'aquest Consell.