两宫不和及平清盛
当时，平滋子在后白河上皇的后宫之中十分得宠，她的兄长平时忠因此得势。平清盛因为与他们的姻亲关系，也逐渐得到后白河上皇的信任。
《愚管抄》记载：
二条院亲理政务，并在押小路东洞院修建皇居。平清盛一门都在新宫附近建造值宿所，朝夕侍奉。[66]因为在当时的人看来，当时后白河上皇正当权，二条院也试图参政，前景未明，所以平清盛只得小心行事，对上皇、天皇双方都尽心侍奉。
由此可见平清盛的谨慎，以及上皇、天皇之间的对立。该书后面继续写道：
后白河上皇多年以来，一直有建造千手观音像堂的夙愿。于是，平清盛领命，从备前国筹措经费，进献了这样一座佛堂。
长宽二年（1164年）十二月十七日，举行落成供养。后白河上皇希望二条院也能行幸观礼，但二条院却置之不理。后白河上皇请二条院封赏寺院众僧，二条院也置若罔闻。藏人平亲范作为二条院的代表，奉命出席了供养法会，但只是出席而已。
这座佛堂被命名为莲华王院[67]，（中略）后白河上皇将平亲范召到御前询问：“这是怎么回事？”平亲范回答：“天皇没有御旨。”后白河上皇顿时眼泛泪光，说：“唉！他为何对我如此憎恶？为何啊！”(https://www.daowen.com)
平亲范后来说：“当时我真担心上皇将罪责怪到我头上，我害怕得不得了。”
就这样，到了永历二年，即应保元年（1161年），平滋子诞下皇子宪仁亲王（高仓院），而当时二条院还没有皇子，为此还引发了一起疑案，因而引发了一些事端。《愚管抄》记载：
平治元年（1159年）至应保二年（1162年）的三四年间，后白河上皇与二条院政见一致，关系融洽。但有流言说后白河上皇暗地里诅咒二条院。有人说看见权中纳言藤原实长卿在上贺茂宫绘制了二条院的御像，暗中行诅咒之事。二条院命人将神宫中的人抓来询问后得知，是后白河上皇近侧的源资贤卿等人所为。于是，应保二年（1162年）六月二日，源资贤被解除修理大夫的官职。
此外，应保元年（1161年）高仓院诞生时，平时忠曾因自己的胞妹小辨夫人，即建春门院平滋子诞下皇子，犯下失言之过，被解除了官职。[68]
由于两件事的叠加，应保二年（1162年）六月二十三日，源资贤、平时忠二人被处流放。
长宽二年（1164年）十一月，二条院第一皇子诞生。后白河上皇为避嫌，便将平滋子所生第五皇子宪仁亲王过继给平滋子的侄女——关白藤原基实的夫人平盛子。这位平盛子，是平清盛与平时子的女儿，她被平清盛嫁给关白藤原基实，后来居住在东三条府邸。作为此前平正盛、平忠盛等人依附的白川殿夫人（祇园女御）义子平清盛之女，平盛子有望继承白川殿夫人的领地及封号，因此才得以成为关白藤原基实的夫人。当时藤原基实已经有儿子藤原基通，后白河上皇又让平盛子收第五皇子宪仁亲王为义子。
于是，平盛子之父平清盛成为皇子（宪仁亲王）的外祖父，并因此从参议升至中纳言、大纳言，一路扶摇直上。自平清盛父亲平忠盛一代起，平氏一族不仅军功卓著，而且进献了大量御所、寺塔、府宅等，如今平清盛又在天皇、上皇面前竭力尽忠，所以才得到后白河上皇如此恩宠。