两家没有独立的势力，靠的是皇帝宠爱。汉和帝时候阴皇后失宠，被陷害说有巫蛊之事，于是阴家没落。汉和帝的邓太后因为专权，死后家人被诬告打倒，于是邓家没落。看起来似乎各有各的原因。其实是开国时候的功劳已经远去，旧关系破灭，于是没落的。西汉开国贵族也是差不多开国70~100年被消灭的。
