Vor seiner Präsidentschaft in Uganda lebte Yoweri Museveni in den 1980er Jahren als politischer Flüchtling in Nairobi. Seine Familie, angeführt von seiner Frau Janet, floh nach Kenia, um den Todesschwadronen von Milton Obote zu entkommen. Sie standen zahlreichen Bedrohungen gegenüber, bevor sie schließlich Kenia nach Schweden verließen.
Yoweri Museveni und seine Familie kamen Anfang der 1980er Jahre nach Kenia, nachdem sie mit dem Regime von Milton Obote kollidiert waren. Janet Museveni und ihre Kinder flohen zuerst und kamen mit einem vertrauenswürdigen Helfer in Nairobi an. Sie blieben zwei Wochen im Haus von Sir John Bageire in Westlands, dann zogen sie in ein Zweizimmerhaus in Ngong um. Muhoozi Kainerugaba besuchte die erste Klasse in der Rusinga School, während Natasha und Patience Rwabwogo den Kindergarten an der Riverside Drive besuchten. Später zog die Familie nach Mangu Gardens in Muthangari abseits der Waiyaki Way um. Um über die Runden zu kommen, reiste Janet ins Ausland, um Kinderkleidung zu kaufen und in Nairobi weiterzuverkaufen, während ihr Mann im Busch kämpfte. In ihren Memoiren My Life’s Journey erinnerte sich Janet: „Ich sagte mir immer wieder, dass ich, wenn ich das Glück hätte, mich mit meinem Mann wieder zu vereinen, die beste Ehefrau sein würde.“ Alles änderte sich, als das Radio Museveni als Feind des ugandischen Staates verkündete. Museveni unternahm eine geheime Reise nach Nairobi, um Agenten zu treffen und seine Familie zu besuchen, verließ das Land aber schnell. Die Familie zog dann Ende der 1980er Jahre in die Shauri Moyo Estate um, ein bekannter Knotenpunkt für ugandische Exilanten neben Gebieten wie Calif Eastlands. Kenianische Special Branch-Agenten begannen, ihr Zuhause zu überwachen. Agenten drangen ins Haus ein, als Janet abwesend war, und befragten die Kinder nach ihrem Vater. Janet trainierte die Kinder, zu sagen, dass Daddy nicht da sei, und das Nachnamen Museveni nicht mehr zu verwenden. An der St Augustine's Primary School abseits der James Gichuru Road versuchten zwei Männer, die Kinder abzuholen und behaupteten, Janet habe sie geschickt, aber der Schulleiter weigerte sich. 1983 wurde ihr ugandischer Hausdiener John entführt, aber Freunde sagten, die Entführer hätten es auf Janet abgesehen. Nach Warnungen ugandischer Freunde und NRM-Beamter vor der Übergabe von NRM-Agenten durch kenianische Agenten an Obote eilte Janet ins Internat in Nyeri, um Natasha abzuholen, und floh über einen niederländischen UNHCR-Freund nach Schweden. Großbritannien lehnte Asyl ab, um Obote nicht zu provozieren.