元宏岁失去了生母，他的生母李氏是他被立为太子时依旧制赐死的；元宏岁时，父亲又被祖母冯太后毒死。此后，元宏就在冯太后的抚育下生活及从政。冯太后虽然是杰出的女政治家，但元宏不是她的亲生子女，她自己也不曾生育过子女，因此，元宏从她那里不可能得到真正的母爱。虽然元宏从小就很懂事，很乖巧，但冯太后还是责打过他，曾把他关在空屋子里挨冻受饿，还差点废掉他。

元宏稍稍长大后非常孝顺，与冯太后的关系搞得很好。由于他小心谨慎，所以没有再出什么岔子。但直到冯太后去世，他都不知道自己的生母是谁。

元宏的爱情生活也是很不幸的。

元宏少年时，与一位林姓宫人发生了爱情。林氏遭遇与冯太后相似，也是因父亲犯罪被诛收入宫中的。林氏美丽温柔，元宏很喜爱她。不久，林氏为元宏生了个儿子，取名元恂。因为元恂将被立为太子，依照旧制林氏应被赐死。元宏是个仁慈的人，不愿意林氏惨死，但他又不敢违抗太后的旨意，最后，还是眼睁睁看着心爱的人离开了人间。

除林氏外，元宏还有三个冯姓妻妾。

原来，冯太后被抄家时，她的哥哥冯熙流亡在河洛一带，多年音讯不通。冯太后作了太后之后，找到了哥哥，把他迎回长安，为他娶了自己的小姑子博陵长公主，并封他侍中、太师、中书监、领秘书事等大官。冯太后为了冯家的富贵兴盛，先后把冯熙的三个女儿嫁给元宏。

按辈分，冯熙的女儿是元宏的表姨，但她们岁数与元宏相仿。一开始进宫的是两个妾生的女儿，其中一个不久就去世了。另一个母亲姓常，常氏出身微贱，因为妩媚动人、善于察言观色、伶俐乖巧，很得冯熙喜爱，后来公主去世，就由常氏主管家政。常氏的女儿冯氏容貌、性情、举止都很像母亲，进宫后，很快就得到元宏的宠爱。两个人花前月下，卿卿我我，非常投缘。但不久，冯氏得了慢性病，冯太后怕影响元宏的健康，把她送回家去作了尼姑。小夫妻分离时异常悲痛。但元宏从不违抗太后的旨意，他送走了冯氏，常常派人去探望、慰问，有时还送去些东西，以示怀念。

冯氏回去后，冯太后又把冯熙的一个小女儿接进宫中，这个小女儿是公主的女儿，身分高贵，从小受到良好的封建教育。她端庄谨严、不苟言笑，不像姐姐那样惯会迷人，所以元宏对她虽然敬爱，但不如对她姐姐那样亲热。

冯太后去世后，元宏坚持了三年的丧礼。元宏执礼是很认真的，这三年里，他不与任何女性接触。三年终丧后，大臣请立皇后，元宏感念冯家的恩惠，把冯熙的小女儿立为皇后，主管六宫。