行幸平等院、后冷泉院与关白之职
藤原赖通担任关白之职多年，已经年逾古稀。其弟左大臣藤原教通也到了古稀之龄。按照以前的惯例，关白年纪大了，都会主动上表请辞，将关白之职让给自己的弟弟，但藤原赖通却没有这样做。他在宇治营建平等院，以养病为托词，长居于此。国家大事都是由职事官将公文送到平等院，给藤原赖通阅览。
治历三年（1067年），后冷泉院行幸平等院。《今镜》记载：
治历三年（1067年）十月十五日（一说七月七日），天皇（后冷泉院）行幸宇治平等院。关白藤原赖通二三年间，均在此养病，所以天皇（后冷泉院）亲往探视。为了迎接天皇（后冷泉院），藤原赖通安排乐人在宇治川上，乘舟奏乐助兴。天皇（后冷泉院）站在宇治桥上，遥遥望见，感叹此地竟有如此风情。（中略）
平等院中，河流上修建了亭台，池塘中漂浮着中式游船，船中传来悠扬的笛声。天皇（后冷泉院）面前所用的物品，全都是金雕玉饰，十分华美。
天皇（后冷泉院）原本应该治历三年（1067年）十月十六日回宫，但因为大雨，就留了下来。治历三年（1067年）十月十七日举行诗宴，天皇（后冷泉院）御制一首：
忽看乌瑟三朝影，暂驻鸾舆一日踪。
（中略）
天皇（后冷泉院）这次行幸中，在宇治院封藤原赖通为准三宫。
藤原赖通受到如此荣宠，已经完全承袭了祖先曾经的荣耀，但他却依然迟迟不愿让出关白之位。藤原赖通曾将义女藤原嫄子送入宫中，不久之后藤原嫄子薨逝，他又将次女（其实是长女）藤原宽子送入宫中。永承六年（1051年），藤原宽子被立为皇后，藤原赖通一心希望这位皇后诞下皇子。皇子一旦出生，马上就会被册立为皇太子。当时，藤原赖通的弟弟藤原教通也将自己的三女儿藤原欢子送入宫中成为女御。如果此时藤原赖通将关白之位让给藤原教通，那么藤原教通的女儿一旦生下皇子，这个皇子就会因为关白外孙的身份被立为皇太子。到了那个时候，即使皇后（藤原宽子）同时生下皇子，也很难被立为储君了。如果皇后（藤原宽子）比女御（藤原欢子）晚生下皇子，皇太子之位就更不用想了。然而，只要自己还在关白之位，即使女御（藤原欢子）生下皇子，自己也能以关白的身份阻止立储，等待皇后（藤原宽子）的皇子出生。其次，藤原教通年纪渐老，如果在这期间薨逝，虽然三弟藤原赖宗是右大臣，但自己的儿子藤原师实也是内大臣，完全可以以关白嫡子的身份，超越藤原赖宗，继任关白之职，朝中也无人敢有异议。所以，出于这样的野心，藤原赖通绝不会轻易让出关白之位。
至于藤原教通，他完全明白兄长藤原赖通的想法，但他不争不抢，只管向天皇（后冷泉院）表达恭顺。他心知，自己的兄长任意而为，比如在平等院处理政务等，迟早会导致上下离心，到时候天皇（后冷泉院）自然就会任命自己为关白。（藤原赖通没有献上“壶切”宝剑，而藤原教通献了，想必也是出于对天皇的恭顺。）
后冷泉院也洞察到了这对兄弟的心思，他一边收揽双方人心，一边将历代藤原氏对朝廷采取的利己谋略施用在他们兄弟之间，想要趁此机会，将藤原氏的权威收归朝廷。
在这种情况下，关白的任命完全取决于天皇的信任。所以，后来后三条院时期关白权势突然衰落，其实在这个时期就已经埋下了种子。这个时期对藤原氏而言，正是由盛转衰的过渡期。