建武九年，祸从天降，阴丽华的母亲邓氏和弟弟阴欣被强盗杀害。阴丽华万分悲痛，至深的哀感改变了容貌。光武帝也很悲伤，令大司空前往阴家慰问家属，并带去了诏书：

　　朕微J之时，娶阴氏为妻，后来因领兵出征，与她分离了两年，幸亏两人都脱离虎口，平安无事。阴贵人有母仪之德，本应立为皇后，但她一再推辞，宁愿屈居妾位。朕欣赏她的谦让，许诺分封她的兄弟。不料未及封爵，母子二人同时死于非命，实在令人悲伤。

　　诏书情真意切，当是刘秀自己的文笔，表达了他对阴丽华的深厚感情。刘秀又追封阴丽华的已故父亲阴陆和她的兄弟阴欣，由阴丽华的弟弟阴就继嗣宣恩侯。当灵柩在堂，光武帝又令太中大夫拜赠印绶，一如在国列侯之礼。仪式十分隆重，既表达了对死者的哀悼，也显示了阴丽华在光武帝心中的地位。

　　阴丽华从小温顺柔弱，心地仁慈，举止矜持，不喜笑谑。她七岁丧父，在以后的岁月里，每次谈及自己的父亲，她总是潸然泪下。如今年未三十，又失去了慈母，更是悲不自胜。刘秀目睹此情此景，自然会想起自己极其相似的经历，每念及自己少小失恃的艰辛，他总是叹息良久。沉默哀婉的气氛不断加深刘秀和阴丽华之间的感情，两人相知相怜，情真意切，相伴的时间就更多了。

　　时间一久，郭皇后感到了莫名的孤单。大丈夫有三妻四妾，本属常事，何况她的丈夫是一国之君。但郭氏也是一个渴望感情的年轻女子，往日的床笫恩爱，和现今的寂寞生活形成了巨大的反差。无数个空床独守的长夜，让她少了女性的温柔，多了无礼的抱怨。她可能不是一个委婉细腻的女人，想不出什么办法来挽回往昔的夫妻情意，反而在很多事情上给光武帝留下了这样的印象：她自视甚高，盛气凌人，总要与阴丽华争一日之长短。