據悉，餘文樂被黃聖依的清純氣質吸引，並開始向伊人大獻殷勤，不用演出時，經常主動和對方搭訕，閑談間，更經常問及黃聖依的家事。在片場，經常可以看到餘文樂和黃聖依兩人坐在一旁，喃喃低語的情景。
有一次，餘文樂拍攝與一條狼狗的戲，沒有戲份的黃聖依不僅在一旁凝神注視，而且還不時輕笑，有時看到比較驚險的時候，還神情緊張，比自己拍攝時還要認真。而餘文樂在順利拍完後，還不忘朝黃聖依舉起勝利的手勢，兩人的默契不言而喻。
也許覺得黃聖依是內地演員，有必要帶她見識一下香港的“夜生活”，於是“名聲”不佳的餘文樂，無懼惹出緋聞的危險，主動出擊約會黃聖依夜遊蘭桂坊。但為免太過張揚，兩人約會最後加入了另一名演員夏雨同行。
由於夜店裏的環境比較嘈雜，兩人經常把頭湊在一起，親密無間儼然一對熱戀中的情侶，“電燈泡”夏雨被完全拋在了一旁。餘文樂帶著兩人“逛”了香港多家知名夜店，四個小時下來連續不斷地換場，狂歡到淩晨時分才盡興而返。
餘文樂還甘當“柴可夫”，盡顯“紳士風度”，把黃聖依送回酒店後，才依依不舍地離開。
香港記者近日去探班見到黃聖依，便在第一時間問她誹聞是不是真的，有沒有發展的機會，誰知黃聖依十問九不應，而她身邊的助手就不停為她擋駕。
餘文樂與合作女星緋聞多
自從餘文樂出道以來，女友眾多，經常傳出緋聞，幾乎每次餘文樂拍攝新片時，都會與合作的女星傳出緋聞。
2001年，餘文樂演出廣播劇《戀上你的床》時，雖然隻是個新人，卻被爆與盧巧音火速戀上，兩人的“姐弟戀”一下子吊起了人們的胃口。
青春偶像電影《愛比甘蔗甜》是餘文樂與鍾欣桐（阿嬌）第一次合作。因為劇情簡單而且沒有多大的新意，所以，在宣傳的時候，兩個人的緋聞反而成了重中之重。
《愛情白皮書》讓餘文樂楊丞琳這兩個都“名花有主”的人“擦出火花”。有台灣媒體爆出，劇中主角餘文樂及楊丞琳因為對手戲多，加上拍戲朝夕相處，兩人培養出濃厚的感情，因此拍拖傳言不脛而走。
這些緋聞必然地刺激了新片的票房或新劇的收視率，難怪餘文樂無奈地說：“作為一個新人，很多事都沒有能力去向別人解釋，故隻想做好自己，遠離緋聞，希望大家放過我啦！”