继而，武帝起身更衣，子夫则随去侍候，并在尚衣的轩车中得到初幸。武帝回到筵席后非常高兴，赐给了平阳公主黄金千金。
平阳公主因此奏请将子夫送入宫中，武帝欣然答应。临别上车之时，平阳公主亲抚着子夫的背说：“走吧，在宫里好好吃饭，好好自勉努力，将来若是富贵了，不要忘记我的引荐之功。”
自建元二年入宫以来，时隔一年多的时间里，卫子夫竟然再也没有受到召幸。
建元三年，汉武帝再次选择宫中年迈体弱等无用处的宫人释放出宫。
卫子夫得见天子，哭着请求武帝释放她出宫回家。武帝怜爱卫子夫，再一次临幸了她，卫子夫因此而怀孕。
汉武帝对她的尊宠也一天胜过一天。
然而好景不长，当时的皇后陈氏是大长公主刘嫖之女，因当初武帝尚为胶东王时，刘嫖为其得立为太子出了力气，陈皇后亦以此原因而骄横高贵。
当她听说卫子夫受到大幸而怀孕，自己却数年没能生孩子，便嫉妒卫子夫。其母刘嫖便派人去抓捕卫子夫的弟弟，当时在建章当差的卫青，欲杀卫青以恐吓卫子夫。所幸卫青的朋友公孙敖带领一干壮士及时相救，使卫青免于一死。
武帝得知此事后，便召卫青为建章监，并加侍中。卫子夫的兄长卫长君也得到显贵，亦加为侍中。
数日之内，赐给卫家的赏金累计竟达到千金之多。
而后卫子夫得到大幸，有宠于皇帝，封为夫人，十年间先后为汉武帝生下三女一男。
而其家族更是得到极度的显贵。卫子夫的长姐卫君孺嫁给太仆公孙贺为妻，公孙贺亦因此更受亲信；二姐卫少儿因与陈掌有私，汉武帝便召见陈掌使其显贵；公孙敖因与卫家亲近而受益；卫青则升为大中大夫之职。纵览汉武帝一朝，更无此幸。
汉武帝元光五年(前130年)，因陈皇后巨资求子而不得，于是使用媚道害人邀宠的事情被察觉。
武帝非常愤怒，便派御史大夫张欧负责此案。当时张欧的下属侍御史张汤深入案件，追查出楚服等人为陈皇后施巫蛊之邪术，建立祠堂祭祀诅咒，祝告鬼神，祸害他人，属大逆无道之罪。
至此，为后11年的陈皇后于秋七月乙巳日以惑于巫祝被废，退居城郊离宫。
此后半年有余，卫子夫再次怀孕。元朔元年(前128年)春天，已承宠10年的卫子夫为称帝12年之久，时龄29岁的汉武帝生下