徐惠出身东海徐氏，年少聪慧，文采出众，自幼熟读《论语》、《毛诗》，落笔成文，深受唐太宗的礼待

徐惠出身东海徐氏，因徐氏姐弟三人文采出众，人们将三从比作汉朝班氏
徐惠出身东海徐氏，为南朝梁慈源侯徐文整四世孙女，陈始安太守徐综之曾孙女，延州临真令徐方贵的孙女，祖母江夏黄氏，南朝陈司空沈国忠武公之女。 唐果州刺史徐孝德长女。弟弟徐齐聃，侄子徐坚，史书都有传。妹妹为高宗婕妤，也有文采。 当时人们因为徐氏姐弟三人文采出众，将他们比作汉朝班氏。另有一弟徐齐庄，事迹无相关记载，唐玄宗授于他长城县子的爵位。

徐惠年少聪慧，自幼熟读《论语》、《毛诗》，入宫后深得唐太宗的礼待
徐惠五个月大就开始说话了，四岁就熟读《论语》、《毛诗》，八岁自己懂得写文章。父亲徐孝德曾让她试着拟《离骚》作诗，她写了《拟小山篇》：“仰幽岩而流盼，抚桂枝以凝想。将千龄兮此遇，荃何为兮独往？”。父亲看后大吃一惊，知道这孩子的才华想盖都盖不住，于是徐惠的作品马上广为流传。唐太宗听说后，将她召为才人。
因才受宠
徐惠入宫后，手不释卷，诗文更加优美，文思更加敏捷，落笔成文。因此，唐太宗更加礼待她，提升他父亲水部员外郎（最新出土的徐孝德墓志记载为礼部员外郎），并升她为充容。