平忠盛の子で清盛の異母弟。母は池禅尼（藤原宗子）。池禅尼はかつて平治の乱（1159年）の際、処刑されるはずだった源頼朝の助命を清盛に嘆願し、伊豆への流罪に減刑させた人物として知られる。頼盛は平家一門の中で兄清盛とは微妙な距離を保ちつつも、高い官位を得て朝廷で活動した。1183年に平家が都落ちする際、頼盛は一門に同行せず都に留まった。これは母池禅尼が頼朝の命を救った恩義があったためとされ、頼朝もまた頼盛を厚遇して所領を安堵した。平家一門がほぼ壊滅する中で生き延びた数少ない人物であり、母子の情が運命を分けた象徴的な存在である。

一門の中で独自の立場を保った慎重な人物。兄清盛への複雑な感情を抱えつつも、母の教えに従い柔軟な処世術を身につけた。

池禅尼による頼朝助命は日本史の転換点の一つであり、その恩義が頼盛の生存につながった。母子の絆が歴史を動かした稀有な例として語り継がれる。