是自己生父，想让位给他，源氏不肯，便做了太政大臣。
源氏四十岁时，是他的荣华绝顶时期，冷泉帝亲自为他祝寿。源氏修筑了两座府第，在府第中划出许多区域，将过去他结识过的十多个妇女，收养在里边。他经常与这些妇女，赠歌酬答，举行各种“风雅”的活动。但也就在此时，使源氏精神上产生了不安与苦恼。原来朱雀帝退位后，准备出家，但考虑到源氏的权势，决定将小女儿女三宫嫁给源氏。源氏辞退不得，只好将女三宫迎娶过来。女三宫身分高贵，这使得源氏的正妻紫上十分不安，源氏周旋其间，已感苦恼；不料女三宫年纪幼小，举措失于检点，被内大臣之子柏木（即源氏死去的正妻葵上的侄儿）看上了，并生下一子。源氏发觉后，联想到自己过去与藤壶女御的关系及生下一子冷泉帝的往事，内心十分痛苦。以后柏木为此事郁郁病死，女三宫也落发为尼。
源氏的正妻紫上，经过种种身心劳瘁，体弱多病，她几次请求源氏允许她出家，源氏不许。源氏五十一岁时，紫上病死。源氏不断思念紫上，痛感人世之虚幻，经常想到出家，这样，又过了几年，源氏也死去了。
《源氏物语》通过源氏一生政治上的浮沉及他一生渔色生活的描绘，展示了宫廷贵族的错综复杂的权势之争、各贵族门弟之间的聚合离散，特别是整个宫廷贵族、大贵族们的紊乱的男女关系；细致地、真实地反映了本时期上层贵族腐朽的精神面貌。
这时期的贵族们，利用一夫多妻制这种落后的婚姻制度，同时又利用婚姻中非常松散的男女关系（男女结合后，女方仍留在女家，并无家庭这种形式来维系男女双方的关系）。从而使得男贵族们以妇女为工具进行他们的政治交易，或作为渔色生活的享乐对象。尽管这些贵族妇女被养在深闺，锦衣玉食，珠帘绣幕，由侍女、乳母围绕伺奉，自幼被教以种种视为贵族必备的技艺；但她们所处的地位，不过是一种高等的女奴隶而已。本书的作者紫式部，正是由于她本身是个中层贵族妇女，出于她自身的生活感受，出于她对众多贵族妇女的同情，从而真实生动地描写了贵族妇女在一夫多妻制下，遭受的种种不幸与痛苦。通过本书对这些妇女的悲惨处境的描绘，有力地反映出贵族们行为上荒淫无耻，精神上空虚萎靡的真实面貌。
这部作品，描写的贵族妇女，不下数十人，他们的命运都是充满了痛苦，甚至是非常悲惨的。她们自身不能决定自己的命运。有的做为政略结婚的工具，由她们的父母来摆布；有的在一夫多妻制下，一任男贵族朝秦暮楚，肆意加以玩弄与凌辱。在作品中，每当妇女遭受种种不幸时，她们总要发出“宿世罪业”这种叹息，也就是说当她们无法解释妇女为什么总是被置于这种悲惨处境时，只能用“前世罪业造成今世生为妇女”这种宿命论来麻痹自己。当她们痛苦达于极点，或无法解脱悲惨的处境时，摆在她们面前的唯一出路，就是落发为尼。本书有好几个妇女，最后都逃脱不了这样的结局。在最后十卷“宇治十帖”中，女主人公浮舟，在两个贵公子都去占有她的情况下，她无法摆脱她的痛苦处境，被迫投河自尽，得救后，还是落发为尼。《源氏物语》最后以这样一个结尾来做五十四卷的长篇故事的收场，决不是偶然的。它深刻地象征着整个贵族妇女陷入绝望的境地，从而也象征着整个贵族阶级已经腐朽到不可救药的地步。
即以源氏一生所结识的妇女来看。空蝉是个有夫之妇，她嫁给一个老地方官，不幸可知。源氏对她钟情，在源氏说来，不过是贵公子为了满足“偷情”的好奇心，但却引起了空蝉的理智与感情的矛盾，平白给她增添了无限痛苦。她幸而理智战胜了感情，没有落入源氏的圈套。但在她的年老的丈夫死后，她丈夫前妻的儿子又来纠缠她，迫使她落发为尼。
六条御息所是个寡妇，她最初本不愿以身相许，后来她与源氏结合了，以她的身分年龄招来许多物议，这说明她为源氏是付出了很大代价的。但源氏与她结识后态度冷淡。在当时迷信观念盛行的时期，竞相传说她出于嫉妒，生魂经常出现在源氏所结识的其他妇女面前。这种流言，更增加了她的痛苦，当她女儿到伊势去做“斋宫”（注：“斋宫”——日本古俗，派遗未婚的皇女到伊势神宫等处去事奉神，要到下一代天皇继位时，始能替换。）时，她决心随同女儿前往，以避开源氏，这说明她对她与源氏的关系感到痛苦之深。
夕颜原是源氏的妻兄——左大臣之子头中将所结识的贵族妇女。她出身低微，也无特殊的才艺，但性情温顺，十分天真。由于头中将的正妻依仗母亲的权势，企图危害夕颜，逼使夕颜藏踪匿迹以避祸。源氏与她结识后，由于源氏轻率的行动，使她过早地结束了她年轻的生命。她遗下的幼女，被迫流落到外地。说明了夕颜这个贵族妇女是个一夫多妻制的明显的受损害者。
末摘花的身世则更为可怜。她虽然是亲王的女儿，门第高贵，但她成人时父母已双亡，家道中落。她做为一个孤女，容貌丑陋，才艺全无。她是个由上层贵族家庭没落到中、下层贵族地位中来的一个典型。源氏与她结识，发现她是个丑女人后，对她仍给予经济上的照顾，完全是出于对她的怜悯。尽管源氏没有抛弃她，但却在和她进行和歌赠答中不断嘲笑她的丑陋。当源氏谪居须磨她失去经济靠山，立即被抛进世态炎凉的大海中去，饱尝艰辛，几遭不幸。后来她虽然被源氏接进府中，受到源氏的豢养，但源氏及其他妇女不过是将她做为供他们取笑的玩物。
女三宫的遭遇，则是罪恶的贵族政略婚姻造成的。朱雀帝在退位后，执意要把小女儿女三宫嫁给源氏，源氏当时年已四十，女三宫只有十三、四岁。源氏是个渔色老手，家中又收养着许多妻子，朱雀帝这样做完全是出于源氏权势赫赫这一考虑。女三宫嫁给源氏后，由于内大臣（原来的头中将）之子柏木爱慕女三宫，买通了侍女，和女三宫发生了关系，并生下一子。源氏发觉后，柏木忧惧交集，郁郁而死。女三宫也痛苦万分，落发为尼。柏木与女三宫的故事，说明完全是政略婚姻所造成的悲剧。
作者还在本书中塑造了一个以忍从为美德的妇女形象，这就是源氏的正妻紫上。紫上是源氏按照贵族阶级的“理想”教育出来的妇女，所谓“永远的理想女性”。紫上做为一个贵妇人，不但才貌出众，而且具备男贵族所要求的忍从的“美德”。源氏做为一个身分高贵的大贵族，结识了许多贵族妇女，作者描写紫上对此是尽量不把内心的痛苦流露于外。即使如此，源氏还认为她的为人虽近于完美无缺，“只是有一个缺点，嫉妒”。在女三宫嫁过来后，源氏贪恋新欢，紫上表面上未流露过一句怨言，但背地里却珠泪暗弹，把痛苦深深埋藏在心里。由于源氏一生放纵的男女关系，使得紫上心身交瘁，身体逐渐衰弱，终于在中年就死去了。在她生前的最后几年，她几次要求源氏允许她出家，源氏不许。这说明紫上决不是什么幸福的正夫人，她也不过是贵族阶级的纵欲生活的另一种形式的牺牲者罢了。
以上只是本书中着重刻画的几个妇女形象，其他次要一些的妇女形象还有很多。不管书中出现的妇女遭遇、结局多么不同，但做为贵族妇女，她们都是男贵族的渔色对象，是被损害者，则是毫无疑问的。
本书对于贵族政治的担当者、那些男贵族的描写，却不同于对贵族妇女的描写那样深刻。在写男贵族时，既有暴露、批判他们的一面；也有美化他们的一面。特别是在塑造源氏这个形象时，则批判少而美化多。
总的说来，作者在写源氏及包括天皇一族在内的其他大贵族们时，除了写他们过着穷极奢欲的物质享受外，还写出了这些男贵族一无例外地淫糜的纵欲生活；同时也写出了他们空虚、萎靡、纤弱、颓废的内心世界。书中所塑造的这些男贵族的形象，他们一方面追求感观的刺激，拼命享乐；一方面又总想到人世的无常，“厌离秽士”，动辄想要出家。他们在男女关系上十分紊乱，但在表面上又显出一副温文尔雅的嘴脸。动辄临风洒泪、对月伤怀；对妇女则柔情蜜语，如醉如痴。一遇到他们的爱欲生活发生不如意时，则长吁短叹，涕泪涟涟。他们十分迷信，经常请神官、僧官、阴阳师为他们做祈祷、诵咒。所有这些，都说明了贵族阶级的精神世界已完全处于朽腐状态之中。
作者在塑造源氏这个形象上，给予这个人物以很大的美化。这不但表现在对源氏的仪容、才艺等方面的赞美上，更主要的表现在把源氏写成一个放荡不羁的渔色家的同时，又把他描绘为一个有始有终的人，对妇女是个广大无边的博爱主义者。作者对源氏所结识的众多妇女的种种痛苦遭遇与处境，只是从女人生来的“宿世罪业”这一角度发出叹息，而很少对源氏有所讥评。在“玉鬟”卷的开头，作者通过一个侍女之口来评论源氏说“他即便对那些不是他所深爱的妇女，也决不轻易遗弃，而总要给予照顾”。作者为了把源氏写成这样一个人，描写了源氏兴建六条院这所大宅邸，并把它分成春夏秋冬四个区划，各区划中广植奇花异树、筑成假山泉水，把他一生中结识的妇女都收养在里边。这完全是做为贵族妇女出身的作者，对男贵族所抱的不切实际的幻想。当然，作者在虚构这种调和世界的同时，也并未掩盖隐藏在一夫多妻制下贵族家庭内部的种种矛盾与冲突。结识了玉鬟的黑髭大将与他正妻的冲突，源氏的长子夕雾与柏木的遗孀落叶宫的关系，造成夕雾与正妻云居雁的不和，这类举不胜举的事实，都说明六条院的调和世界，在现实面前是根�