入道相国对自己如此残酷无情的所作所为，觉得或许会有恶报，不免心存恐惧；而且为了安抚后白河法皇的怨愤，更将自己与安艺国严岛内侍所生、芳龄十八、如花似玉的女儿，献给了法皇。还派许多高级女官随侍，不少公卿殿上人相陪，简直像女御进宫一般。世人都窃窃私议道，高仓上皇驾崩后才过二七，此种做法实在有违纲常，不识大体。
且说，当时谣传在信浓国有一个源氏族人，名叫木曾冠者义仲，是故六条判官为义次男故带刀先生义贤之子。父亲义贤于久寿二年八月十六日，为镰仓恶源太义平所杀。义仲当年两岁，其母悲愤填膺，哭哭啼啼，抱到信浓国木曾中三兼远住处，恳求道：“无论如何，请勉为其难，将此儿抚养成器。”兼远谨受所托，不辞辛劳，加以养育了二十多年。越长越壮、力大超人、性极刚毅。有人赞道：果真是世上绝无仅有、难得一见的强弓射手。不管马上或徒步，皆骁勇善战。即如上古之田村、利仁、余五将军、致赖、保昌、先祖赖光、义家等朝臣名将，也不能与之争锋。云云。
有一日，义仲心中有所思，请来监护人兼远，透露道：“兵卫佐赖朝起兵谋反，已征服了关东八国，且正从东海道推进京都，继续追讨平家军。义仲愿从东山、北陆两道，早日歼灭平家，或可与赖朝并称日本国两大将军。”中三兼远听了，正襟危坐，大喜过望道：“正为此事，才答应养育公子，以至今日。听公子所言，不愧是八幡神之后裔。”于是，立即开始筹划起兵事宜。
其实，在此之前，义仲便经常陪着兼远进京，窥探平家族人的虚实动静。十三岁元服时，参拜石清水八幡，在八幡大菩萨尊前，宣誓道：“我四世先祖义家朝臣，在此成为八幡大菩萨之子，号称八幡太郎。我愿步其后尘。”随即在八幡大菩萨尊前，结髻加冠，取名木曾次郎义仲。兼远便道：“可先传达檄文。”于是与信浓国的根井小弥太、海野行亲接触，均无异议。从此信浓一国的武士莫不服从。在上野国则因故带刀先生义贤的缘故，多胡郡的武士也都起而响应。正逢平家走向末路的机缘，当可一偿源氏长年所怀的夙愿。