李家历史上人数不详，但今天中国人口近1亿，占总人口的7.9%，是中国乃至世界第一大姓,然后李氏家族开始长期隐姓埋名的生活，直到春秋战国时期家族中出现了一个叫李二的人，李氏家族才开始重新登上历史舞台,李家灭族与李广的死无关，但有关系且也是次要原因，主要是李家后人做事不当,因为李广曾经李家最强大人物，但是李广死后李家再也没有人能扛得住了。
一个姓李的名人的故事有一个很流行的传说，讲的是李白的童年。曾就读于昌隆县象耳山。有一天，他学习有困难的时候，屋外传来一阵笑声。李白走到窗前，看到是他的小伙伴在玩游戏。他立刻放下书跑了出去。春天，野花遍地，蜜蜂飞舞。李白一边采野花、拍蝴蝶，一边来到一条小溪边，看见一个白发苍苍的老婆婆在溪边的一块石头上磨一根铁棒。他上前好奇地问，你磨这个干嘛？
这么粗的铁条怎么能磨成针？李白惊讶地问。儿子，这根铁棒很粗，但我今明两天都会磨，再磨下去，总有一天会磨成针。奶奶说，然后她磨了磨头。李白摸了摸脑袋，心想，奶奶说得对！只要功夫深，铁棒磨成针。读书不也是这样吗？不努力怎么能学到丰富的知识？所以他立刻跑回家，开始阅读。二十五岁时，李白已经成为一个多才多艺的人。他不仅擅长诗歌和散文，还擅长击剑和骑马，还喜欢弹琴和唱歌。
今天淮河路的李府只有当年大宅的十二分之一，历史上被称为李府半街。后来因城建拆迁，被评为国家级文物保护单位。李鸿章的祠堂及其侄孙李的住宅在上世纪80年代的城市建设中被拆除，还有位于玉溪路的李鸿章堂，至今保存完好。高哲等地至今仍有李鸿章典当行的旧址。指的是段家族，段是民国初年北洋军政府的宰相。段家故居及祠堂位于淮河路与六安路交汇处以北，至六安路校区，即现在的何工大学。它们在上世纪70年代被玩火的孩子们烧毁，原址现已改建为街心公园、市第一医院和工大北区使用的土地、工大北区的娘娘池、第六步兵学校旧址等。那些年私家园林的痕迹还是有的。龚家是清代合肥的名门望族，也是四大家族中最早的家族。
