汉时，金日磾、张安世并为显宦。

许广汉为宣帝许皇后之父。史指史恭及其长子史高。恭为宣帝祖母史良娣之兄。宣帝即位，恭已死，封高为乐陵侯。许史两家皆极宠贵。后因以此四姓并称，借指权门贵族。汉扬雄《解嘲》：“有谈范蔡之説於金张许史之间，则狂矣。”前蜀韦庄《咸通》诗：“咸通时代物情奢，欢杀金张许史家。”清吴伟业《行路难》诗：“对此抚几长叹息，金张许史皆徒然。”