كانت أمه تكنيه أبا الطاهر، بكنية أخيها الزبير بن عبد المطلب، وكانت تضربه وهو صغير وتُغلِظ عليه، فعاتبها عمه نوفل بن خويلد وقال: «ما هكذا يُضرب الولد؛ إنك لتضربينه ضَرْب مُبْغضة» فقالت:
مَنْ قَالَ إِنِّي أُبْغضه فقد كـذب
وَإِنَّمَا أَضْرِبُهُ لِكَـي يَلَبْ
وَيَهْزِمَ الجَيْشَ وَيَأْتِـي بَالسَّلَبْ
وَلا يَكُن لِمَالِهِ خَبْأٌ مُخَبْ