杜牧的《阿房宫赋》写述了秦始皇后宫女子的生活：“妃嫔媵嫱，王子皇孙，辞楼下殿，辇来于秦。朝歌夜弦，为秦宫人。明星荧荧。开妆镜也。绿云扰扰，梳晓鬟也。渭流涨腻，弃脂水也。烟斜雾横，焚椒兰也。雷霆乍惊，宫车过也。辘辘远听，杳不知其所之也。一肌一容，尽态极妍。缦立远视，而望幸焉。有不得见者三十六年。”
这样的描绘，看起来细致生动，然而却大体是基于文学家自己的浪漫想象。当然，这种想象有作者对于唐代宫廷生活的知识作为依据。
可惜历史有限的相关记载，没有能够给我们提供反映秦始皇后宫生活的真切的相关信息。
秦始皇个人的情感经历，性爱生活，究竟是一种怎样的情形呢？
我们只知道，秦始皇的儿子和女儿，人数并不算少。
《史记·高祖本纪》司马贞《索隐》写道：“《善文》称隐士云‘赵高为二世杀十七兄而立今王’，则二世是第十八子也。”说赵高为了立胡亥为帝，杀了秦二世的十七个哥哥，这么说来，秦二世胡亥是秦始皇的第十八个儿子。
《史记·秦始皇本纪》说，秦二世胡亥登基之后，清洗宗室中有可能动摇他的权力和地位的力量，有六位公子戮死于杜。公子将闾兄弟三人被囚于内宫，后来拔剑自杀。《李斯列传》说，秦二世即位后，有公子十二人僇死咸阳市，有十位公主死于杜。另有一位公子高，本来想要逃走的，但是又担心他的家人被杀害，于是上书请求为先帝从死，葬于丽山脚下。
《秦始皇本纪》所谓六公子戮死于杜，和《李斯列传》所谓公子十二人僇死咸阳市，很可能有重复的情形。如果只是按照《李斯列传》的说法，那么，包括公子扶苏和胡亥，则秦始皇的子女至少有二十五人。如果再加上公子将闾兄弟三人，则一共有二十八人。
如果六公子戮死于杜和公子十二人僇死咸阳市并不重复，那么，秦始皇的子女竟然多至三十四人。
这其实只是我们根据胡亥杀害其兄弟姐妹的相关资料作出的统计，实际的人数，可能还要多。
据学者张文立统计，认为“始皇帝有儿子三十位，女儿十五位，子女共四十五位”。
这样说来，似乎应当消除秦始皇的性生活可能不正常的疑虑。
和其他大有作为的帝王不同的是，素始皇的女人们没有一位在史书记载中留下过姓名。
在荆轲行刺秦王政时，唱“罗縠单衣，可掣而绝;八尺屏风，可超而越;鹿卢之剑，可负而拔”，从而提醒秦始皇拔剑自救的女子，应当也是在秦始皇身边服务的女性。这位救了秦始皇性命的女子，也没有人能够知道她的姓名。
《水经注·沔水》里边有这样一段话，说《太康地道记》记载：吴地有盐官县。乐资《九州志》说：县有秦延山。秦始皇曾经经过这里，随行美人去世，葬于山上。山下有美人庙。《浙江通志》卷一一《山川三》“海盐县”条写道：“秦驻山，《至元嘉禾志》：在县南一十八里。乐资《九州志》云：县有秦径山，秦始皇经此，美人葬于此山下，有美人庙，故名。《水经注》云：海盐县南有秦望山，秦始皇登以望海。”又录有彭绍贤《秦驻山诗》二首：“水浅蓬莱岁几更，凡夫那解驭风行。空教海外留徐福，一片荒山浪得名。”“翠盖金文想象间，昔时流水尚潺湲。美人似念今祠庙，死作山花不肯还。”《山东通志》卷六说，文登县北三十里有“烧车岭”。据《古今图书集成·职方典》说，秦始皇东巡经过此地，有妃生子而死，于是自烧其车。
看来，秦始皇出巡时，是有女子随行的。
有人对秦始皇的皇后予以关注，提出了“为什么秦始皇没有立皇后”的问题，并且认为这是一个“千古之谜”。
讨论者认为，秦始皇在有机会立皇后的时间内没有立皇后，有许多原因，但主要原因是很复杂的。除性格多疑担心皇后掣肘外，还跟秦始皇追求长生不老和后宫美女过多有关。此外，由怨母而仇视女人的心理阴影，使秦始皇长大后在婚姻能力上未能健康发展。由母亲行为不谐而形成的心理障碍，也是秦始皇迟迟未立后的重要因素之一。
据说，秦人在秦孝公以后对于立后和立太子之事已制度化，秦国在发展壮大过程中，各种国家制度已臻完善，秦统一中国后更全面建立了各种制度，并定出了皇帝的正妻为皇后、母亲为皇太后的制度。但是秦始皇帝始终没有设立皇后，这成为令人费解的千古之谜。
其实，说秦国从秦孝公时代起，立后、立太子已经制度化，似乎是缺乏充分的论证的。现在我们看到的资料，尚不足以说明秦国从秦孝公时代起，就已经存在这种完备的制度。实际上，秦始皇的先祖们的正妻，也就是所谓“后”，在史书中均罕见其事迹。《史记·秦本纪》说，“(惠文后)不得良死。悼武王后出归魏。”事在秦昭襄王二年(公元前305年)，她们的实际身份，其实已经不再是王后。“惠文后”名号的使用，其实已经在她具有太后身份之后：“惠文后，武王母也。”“武王即位，尊夫人曰惠文后。”
读秦史的时候，我们常常看到秦国的“太后”如何如何，却很少看到“后”的活动。事实上，秦孝公到秦始皇共有七位帝王，我们只看到两位王后的名号，一位即“叶阳后”。《汉书》记载：西汉名臣张敞说：“臣闻秦王好淫声，叶阳后为不听郑卫之乐。”颜师古注引孟康的解释：“叶阳，秦昭王后也。”另一位即孝文王后。《史记·秦本纪》：“秦昭王五十六年，薨，太子安国君立为王，华阳夫人为王后，子楚为太子。”然而这位华阳夫人只做了一年的王后。“秦王立一年，薨，谥为孝文王。太子子楚代立，是为庄襄王。庄襄王所母华阳后为华阳太后。”关于“叶阳后”，王先谦《汉书补注》引述了沈钦韩的说法，认为《论衡·谴告》中说到“秦穆公好淫乐，华阳后为之不听郑卫之音”。所以《张敞传》“叶阳”是“华阳”之误。“葉”字和“華”字确实字形相近，误写误读是可能的。如果沈钦韩的说法成立，那么，在秦史记录中，从秦孝公到秦始皇七位帝王统治的一百五十一年间，我们只看到一位只当了一年的王后。
秦国王后们的事迹不见于文书的记载，这可能和秦的文化传统有关。秦始皇大概继承了这样的传统，因此秦始皇的皇后在史籍中的沉默，是自然的事，并不构成什么“令人费解的千古之谜”。《初学记》卷一〇《中宫部·皇后第一》说：“秦称皇帝，正嫡曰皇后，汉因之。”如果秦始皇不立皇后，大概不会有“秦称皇帝，正嫡曰皇后”的说法。我们似乎不能因为现在还没有看到秦始皇皇后的事迹，就断定“秦始皇帝始终没有设立皇后”。
