許敬宗出生書香世家，在隋朝時入仕為官，擔任縣令。隋朝大亂時，許敬宗見隋朝四分五裂，遂投靠了瓦崗軍。後來瓦崗軍舉寨投靠李世民，文采頗高的許敬宗得到重用，一度擔任禮部尚書一職。
唐太宗李世民去世後，唐高宗李治體弱多病，朝廷大權漸漸掌握到皇后武則天手裏。許敬宗看出了武則天的野心，馬上投靠，幫助武則天對付終於李氏的宰相長孫無忌等人。經過許敬宗的捏造和誣陷，長孫無忌被流放嶺南，並死在了那裏。許敬宗因功晉升為宰相，成為武則天謀朝篡位的鷹犬。武則天失勢後，許敬宗受到清算，被朝廷稱為唐朝第一奸臣，取消了賜封的所有官銜，子孫後代多被流放蠻荒之地。
數十年後，由於朝廷大赦，奸臣許敬宗之曾孫許遠得以入仕為官。許遠與其祖先不同，為官清廉，又勤政愛民，不久就升為睢陽太守。此時因為唐玄宗寵信楊國忠、李林甫等奸臣，導致安祿山叛變。叛軍攻破都城長安，並一路南下，準備攻打睢陽。很多官員都因為敵軍強大而舉城投降，只有縣令張巡和太守許遠不降，招募民軍死守城池。
由於沒有援軍，睢陽城在許遠和張巡的嚴防死守下，整整堅持了十個月之久。期間，糧食吃光了就吃家畜，家畜吃光了就吃蛇蟲鼠蟻，蛇蟲鼠蟻吃光了就吃野菜樹皮，後來實在沒有吃的就殺小妾和書童給士兵充飢。睢陽城破以後，許遠被俘，拒絕投降被殺於洛陽。唐肅宗為了表彰許遠的功績，封其為荊州大都督，陳像凌煙閣，並敕建雙忠廟於睢陽，歲時致祭。至今其廟依然享受百姓的香火。
許遠以罪官家屬身份入仕為官，本就已經十分不易。其以弱小的睢陽城，抗拒叛軍長大十個月之久，為唐朝擊敗叛軍贏得了調兵遣將的寶貴時間。故雖其祖為奸臣，唐肅宗依然將其列入凌煙閣，並建神廟四時祭祀，成為流芳百世的名人，這家人倒是還挺有意思的。