關於這首詞的寫作背景，前人異說紛紜。南宋楊湜《古今詞話》載：”蘇子瞻守錢塘，有官妓秀蘭，天性黠慧，善於應對。一日，湖中有宴會，羣妓畢集，唯秀蘭不至，督之良久方來。問其故，對以沐浴倦睡，忽聞叩門甚急，起而問之，乃樂營將催督也。子瞻已恕之，坐中一倅怒其晚至，詰之不已。時榴花盛開，秀蘭折一枝藉手告倅，倅愈怒。子瞻因作《賀新涼》，令歌以送酒，倅怒頓止“（《苕溪漁隱叢話》後集引）。胡仔認爲此言荒野，堪入笑林。
南宋曾季狸《艇齋詩話》說《賀新郎》是蘇軾在杭州萬頃寺作，因寺中有榴花樹，且是日有歌者晝寢，故有”石榴半吐“”孤眠清熟“之語。
南宋陳鵠《耆舊續聞》錄陸辰州語，陸辰州說晁以道在看到東坡真跡後轉告他說：蘇軾有妾名朝雲、榴花。朝雲客死嶺南，惟榴花獨存，故蘇詞下闋專說榴花，並有”待浮花浪蕊都盡，伴君幽獨“之語。
