就在这一年，发生了一件对郭皇后十分不利的大事。两年前真定王刘扬率十万大军归顺刘秀，并嫁以甥女，但刘秀却始终不信任刘扬，总想把刘扬的兵马收为己有。正巧这时真定王编造了一条谶文：“赤九之后，瘿扬为主。”汉为火德，所以称赤，自汉高祖至今，已有九代，而刘扬的脖子上恰巧长有瘿瘤，这条谶文无疑是在告诉人们，刘扬将来要当家作主。另外，刘扬还与真定一带的地方武装有密切的联系，更使刘秀下决心除掉这一隐患。

　　刘秀首先派将军刘隆征召刘扬，但刘扬闭城不见。光武帝遂令将军耿纯以行赦幽冀、劳慰王侯的名义前往真定，伺机解决刘扬。耿纯一行来到真定的驿站，与刘扬联络。刘扬兄弟自恃强兵在手，又见耿纯来意安详，未有不善之意，便毫无戒意地领了官属去见耿纯。刘扬兄弟进入驿站之后，耿纯立即关闭门户，下令格杀，随后又勒兵而出，“真定震怖，无敢动者”。刘扬虽有暧昧之谋，而无反叛之实，既被诛杀，暴露了刘秀不容一丝风吹草动的猜忌性格。

　　刘扬之死使郭皇后失去了重要的政治依靠。但汉代以礼法治天下，非有严重的过失，皇后之位不宜轻易动摇。光武帝与郭皇后的感情虽然不甚美满，但他们的矛盾尚未尖锐化，建国初年的刘秀尚能克制自己的感情，保持后宫的稳定。于是，原来的妻妾关系又维持了多年，阴丽华也默默地做了十六年的贵人。

　　阴丽华没能当上皇后，刘秀又想了一个补偿的方法，封她的弟弟阴兴为列侯。阴兴跟随刘秀东征西讨，平定郡国;刘秀每到一处，阴兴总是先入清宫，不辞辛劳，因而深得刘秀的信任。面对皇帝给他的列侯印绶，阴兴固辞不受，他说：“臣未有冲锋陷阵之功，却得到陛下、贵人的恩泽，富贵已极，不可复加，实在不能再受封赏。”光武帝欣赏他的谦让之德，也就不再勉强。

　　阴兴和阴丽华谈起这件事时，还语重心长地对她说：“贵人一定听说过‘亢龙有悔’这句话吧，现在的外戚大多不知谦退，嫁女儿要高攀王侯，娶媳妇则相中公主，实在让人心里不安。富贵有极，人当知足，过分的夸耀和奢侈只会招人讥讽。”阴丽华听了他的肺腑之言，深受启发，更加谦和恭让，“深自降挹”，并严格约束自己的家人和亲戚，不为他们谋求朝廷的职位。姐弟两人谦虚谨慎的美德更赢得了光武帝的敬重和欣赏。

　　尽管阴丽华的地位比郭圣通低，但她得到的宠幸却一点都不少，她也为光武帝生了五个儿子，与郭皇后平分秋色。