Dziadek Minamoto no Yoritomo ze strony ojca, Minamoto no Tameyoshi, przewodził szanowanemu klanowi Minamoto, podczas gdy jego dziadek ze strony matki, członek słynnego klanu Fujiwara, służył jako główny kapłan w świątyni Atsuta, drugiej najbardziej czczonej świątyni Shinto w Japonii po Wielkiej Świątyni Ise. Matka Yoritomo powróciła do swojego rodzinnego miasta, obecnie Nagoya, a Yoritomo urodził się w Atsuta (Nagoya) 9 maja 1147 roku, w miejscu, w którym dziś stoi świątynia Seigan-ji.
Minamoto no Yorinobu, urodzony we wpływowym klanie Minamoto jako syn szanowanego męża stanu Minamoto no Mitsunaka, pełnił ważne funkcje, takie jak pełniący obowiązki gubernatora dziesięciu prowincji, głównodowodzący i obrońca północnych okręgów. Mitsunaka był jednym z najlepiej prosperujących i najbardziej wpływowych dworzan w okresie Heian.
Minamoto no Sanetomo, młodsze rodzeństwo drugiego szoguna Kamakury, Yoriie, który został zdetronizowany przez ich dziadka ze strony matki, a następnie zamordowany, co w konsekwencji doprowadziło do mianowania Sanetomo szogunem.
Daimyo Matsunaga Hisahide z okresu Sengoku był historycznie przedstawiany jako nikczemny intrygant, stara i przebiegła postać, siejąca spustoszenie w życiu i majątku - archetypowy czarny charakter. Pomimo tych przedstawień dominujących we współczesnych sztukach teatralnych, serialach telewizyjnych, filmach i tradycyjnych drzeworytach, w rzeczywistości był on wysokim, przystojnym mężczyzną z wykształceniem i mecenasem sztuki, gdy zmarł w wieku 68 lat.
