Ketika usianya beranjak six tahun beliau kembali tinggal bersama ibunya. Setiap tahun, beliau diajak ibunya pergi ke Madinah untuk mengunjungi kuburan ayahnya dan menjalin silaturahmi dengan keluarga. Nabi Muhammad SAW meramalkan salah seorang istrinya akan menunggangi unta merah, dengan banyak anjing yang menggonggong dan orang tewas di sekitar