韓熙載的這種行為，有意造成了放蕩不羈，不堪重用的影響。但是他畢竟有一個人口眾多的家庭，僅靠遊戲般的乞討是不能解決問題的。在不能度日、無可奈何的情況下，他隻好向後主上表哭窮，後主李煜雖然不滿，但還是以內庫之錢賞賜。
於是韓熙載索性不再上朝，被人彈劾，貶為右庶子，分司於南都，即於洪州安置。韓熙載遂盡逐諸伎，一麵單車上路，一麵上表乞哀，當後主將他挽留下來後，以前所逐諸伎又紛紛返回，韓熙載也重新回到了以往那種縱情聲色的日子。麵對這樣的韓熙載，後主李煜也不禁感歎：我都不知道該怎麼辦。
韓熙載才華橫溢，也曾經立誌報國，但是如今卻放蕩到如此地步，不能不引起人們的頗多猜測。後主李煜曾經想拜韓熙載為相，這在《宋史》、《新五代史》、《續資治通鑒長編》、《湘山野錄》、《玉壺清話》、陸遊《南唐書》等諸多典籍中都有所記載，應該是確實無疑 的，這也很可能是李煜派人去韓熙載家繪製夜宴生活圖景的原因。
在諸多的猜疑傳聞之下，李煜也頗想知道真相，以便確定韓熙載是否可以重用。顧閎中大概就是領受了這樣的使命，夜至其第，竊窺之，目識心記，圖繪以上。
關於韓熙載醉生夢死、躲避拜相的真正原因，《南唐書·韓熙載傳》與《釣磯立談》等書中都曾經說道：
韓熙載認為中原王朝一直對江南虎視眈眈，一旦真命天子出現，我們連棄甲的時間都沒有了。在這種情況下，我如何能夠接受拜相，成為千古之笑談？
在這一時期，韓熙載的政治抱負和理想完全破滅了，而且亡國當
俘虜的命運迫在眉睫，他個人內心和客觀現實的錯綜複雜的矛盾與痛苦在折磨著他，使他除了以聲色自娛來安慰和消磨自己以外，他已別無出路。
這就是我們看到《韓熙載夜宴圖》中的韓熙載在歡宴時，非但不是心情歡暢，反而表現出悒悒不樂、心情沉重的表情，其根本原因就在於此。
後來，韓熙載在69歲的時候死去。韓熙載死後，後主李煜非 常痛惜，欲贈其同平章事的官職，遂問左右前代是否有這樣的先例，左右回答說以前劉穆之曾贈開府儀同三司。於是下詔贈韓熙載左仆射、同平章事，即宰相之職，諡曰“文靖”，這在古代已經是極好的諡號了。
韓熙載死時家裏已經非常貧窮，棺槨衣衾，都由後主賜給。後主又命人為其選擇墓地，要求必須選在“山峰秀絕，靈仙勝境，或與古賢丘表相近，使為泉台雅遊”。
後來又將他埋葬在風景秀美的梅頤嶺東晉時期著名大臣謝安墓旁。李煜還令南唐時期著名文士徐鉉為韓熙載撰寫墓誌銘，徐鍇負責收集其遺文，編集成冊。這種待遇對於臣下來說，可謂榮耀之至了。