漢武帝唯一鐘情的女人，大概就是李夫人吧。據說李夫人有這一顧傾人城，再顧傾人國的容顏，但當她不幸染上疾病，面容憔悴的時候，漢武帝親自來探視，她卻避而不見，武帝最后甚至是說，見一面賞金千金，封其兄為侯。李夫人只是一直哭說:封不封在陛下，不在一見。武帝氣的拂袖而去。

左右都不理解，說:陛下對夫人如此關切，為何夫人……

李夫人嘆氣說：“你們不知，我不見陛下的原因，是為了深托兄弟。我本出身微賤，他之所以眷戀我，只因平時容貌而已。大凡以色事人，色衰而愛弛，愛弛則恩絕。今天我病已將死，他若見我顏色與以前大不相同，必然心生嫌惡，惟恐棄置不及，怎么會在我死去后照顧我的兄弟姐妹?”

最后果真不出李夫人所料，她的去世引起了武帝更大的悲痛，甚至派畫師專門畫了她的容顏，懸掛起來，以示思念。

武帝十六歲繼位，在位五十四年，一生后宮無數，恐怕用情最深的，也就僅對李夫人吧，畢竟陳阿嬌，衛子夫以及勾戈婦人，都是玩后就被拋棄啦。