然盛极必衰，一场飞来横祸——侯景之乱横扫江南，加之历朝皇帝对谢氏的猜忌，陈郡谢氏急剧没落。陈朝末年，当谢贞去世后，这位昔日华丽豪门，伴随着乌衣巷一道，无奈的落下了帷幕。
四、琅琊王氏
“王与马，共天下”、“不以王为皇后，必以王为宰相”的琅琊王氏，与陈郡谢氏并称王谢。“吾少好百家之言，身为四代之史。自开辟以来，未有爵位蝉联、文才相继如王氏之盛也。” (沈约)。
如果说以《二十四孝》《二十四悌》闻名的“卧冰求鲤”的王祥、王览，奠基了琅琊王氏，那么他们的孙辈王戎、王衍、王澄、王敦、王导，则开启了权倾天下的江左豪门。
王氏家族在南朝时期很多人信五斗米道教，因此在第四代中，很多人的名字都带个“之”字。除王羲之外，还有王胡之、王彪之、晏之、允之等等平辈兄弟，还有徽之、献之、恢之、陋之等等儿孙辈，名字带之字的王氏子弟之多，在中国历史上也算是一绝了。
由于与陈郡谢氏同样的原因，南朝的琅琊王氏开始衰弱，这时候，王导的六世孙王肃投靠北魏，因文治武功被魏孝文帝委以重任，并娶孝文帝之妹陈留长公主为妻。王肃的女儿被宣武帝讷为夫人，孙女又嫁给了孝明帝。直至北魏分裂为东、西魏之后，琅琊王氏家族的政治地位和社会地位才真正走向衰落。
五代时，琅琊王氏的一个分之，唐朝宰相王琳的五世孙王潮与王审知，进军闽地，建立了十国中的闽，成了如今福建台湾广东王氏的先祖。
五、清河崔氏
“人面不知何处去，桃花依旧笑春风”。清河崔氏，“四大家族”之首。
清河崔氏在春秋时乃齐国公卿之一，至西汉时居住在清河郡，东汉以后成为山东望族，其中崔琰曾投曹操门下。西晋时讲究士族门第，崔氏被列为一等大姓“崔卢王谢”之首。
清河崔氏后长仕北朝，北魏时一度与范阳卢氏、荥阳郑氏、太原王氏并称为“四大家族”——这个四大家族可是官方的评价噢～～其中的北魏开国元勋司徒崔浩，更是将清河崔氏推向了第一个颠峰。
唐代崔氏仍然显赫，有23人做过宰相。唐官员修订《氏族志》，把崔氏列为第一，唐文宗知后大怒曰：“崔氏早已衰微，既无显官，又无人才，凭什么列为第一?难道我李氏贵为天子，还比不上崔氏吗?”下令改以李氏第一，皇后氏族长孙氏第二，崔氏列第三。虽然如此，崔氏仍为士族高门。杜甫的母亲，就是清河崔氏。
清河崔氏曾分出一支为博陵崔氏，也为隋唐著名士族之一。
六、范阳卢氏
“自古幽燕无双地，天下范阳第一州”，范阳卢氏，“四大家族”之二。
范阳卢氏在秦始皇时，有大名鼎鼎的五经博士卢熬，天文博士卢生。继之西汉初期有燕王卢绾，东汉末被尊称“士之楷模，国之桢韩”之海内儒宗之大儒卢植(卢植故居在河北涿州市卢家场)，均出自范阳。及魏、晋、南北朝至隋，卢植之裔卢志、卢谌、卢偃、卢邈、卢玄等等，都是官宦世家，书香门第。从卢玄起至其曾孙，一家百口，共财同居，为官著名而被史传记载者就有18人。帝族之子要找卢氏成亲，史称“范阳卢氏，一门三公主。”帝族也要纳范阳卢氏之女为贵妃。史家有四海大姓崔、卢、王、谢之说：“望出范阳，北州冠族”。
至唐代尤为突出，不仅状元、进士、帝师，大出人才，有“八相佐唐”、“初唐四杰”之卢照邻， “大历十才子”之卢编等等。自汉末至唐代六百多年中，正史中有记载的卢氏历史名人达840多人，范阳卢氏，贤良辈出，勋业灿烂，文豪蜚馨。
