Varysille on kiertänyt pieniä lintuja, että Robert Baratheonilla oli epäilyksiä poikansa Joffrey Baratheonin, 14, suhteen, joka lopulta korvasi hänet, koska piti häntä ei kovin älykkäänä ja pätemättömänä johtajaksi, mutta kärsi myös useista yksityiselämän ongelmista.