桓譚被大司空宋弘推薦做議郎給事中。桓譚善於彈琴,劉秀非常欣賞他彈的曲子。宋弘得知後,很不高興,聽說桓譚從宮中出來,宋弘就穿上公服,坐在大司空府中,派官吏去召桓譚前來。
桓譚到了,宋弘不讓他坐下就責備他,說:“自己能改正過失嗎?還是要我根據法律檢舉你?”桓譚磕頭謝罪。過了很久,宋弘才讓他回去。
後來,劉秀大會群臣,讓桓譚彈琴。桓譚看見宋弘,彈得頗失常態。劉秀很奇怪,就向他詢問。宋弘從坐席上站起來,摘下帽子道歉,說:“我推薦桓譚,是希望他能以忠義之心輔佐君主,而他卻讓朝廷沉湎於靡靡之音,這是我的罪過。”劉秀聽了,很是慚愧,一臉嚴肅地向宋弘道歉。
劉秀的姐姐湖陽公主新近守寡,劉秀和她一起評議朝臣,並暗中觀察她的心意。公主說:“宋弘的威儀容貌,道德氣度,沒有人能趕得上。”劉秀說:“我正在考慮這件事。”
不久,劉秀召見宋弘,讓公主坐在屏風後麵。劉秀對宋弘說道:“俗話說得好‘地位尊貴了,就換朋友;財富增加了,就換妻子。’這不也是人之常情嗎?”宋弘回答說:“我聽說:‘貧賤之交不可忘,糟糠之妻不下堂。’”劉秀就回頭對公主說:“事情看來沒有希望了。”