唐子畏居桃花庵，軒前庭半畝，多種牡丹。花開時，邀文徵仲、祝枝山賦詩，浮白其下，彌朝浹夕。有時大叫痛哭。至花落，遣小伻壹壹細拾，盛以錦囊葬於藥欄東畔，作落花詩之。”這是寫唐伯虎落魄的時候，生活在蘇州城西北的桃花塢，任性恣情，放浪形骸，卻無法排遣內心郁積的無限痛楚。
年輕時候的唐伯虎，才氣縱橫，不諳世事，以解元身份赴北京會試，意氣風發，不可壹世，卻受到旁人的嫉恨，不幸身陷科場弊案，斷送了青雲直上的前程。褫奪功名之後，唐解元再也無法晉身上層階級，與榮華富貴絕緣，成了壹介布衣，只好靠賣畫謀生。身為詩人畫家，花開花落的絢麗與萎敗，深深刺痛他敏感的藝術心靈。落花的景象，象征著鮮麗人生的死滅，總讓他想起天真純潔的往昔，感嘆美好世界的消逝。唐伯虎拾花、盛以錦囊、葬花、作落花詩，壹連串的情景，的確可以提供素材，作為曹雪芹描繪黛玉葬花的藍本。
唐伯虎著名的《落花詩》三十首，原來是《和沈石田落花詩》，卻成了感傷自己命運的讖語，如第壹首就慨嘆自己才高八鬥，卻無人賞識：“今朝春比昨朝春，北阮翻成南阮貧。借問牧童應沒酒，試嘗梅子又生仁。六如偈送錢塘妾，八鬥才逢洛水神。多少好花空落盡，不曾遇著賞花人。”
他曾多次書寫《落花詩冊》，現今收藏在大陸的就有兩冊，壹藏遼寧省博物館，壹藏蘇州博物館。他還寫過許多詠嘆花開花落的詩歌，慨嘆人世無常，如《桃花庵歌》的“半醒半醉日復日，花落花開年復年。但願老死花酒間，不願鞠躬車馬前”。《花下酌酒歌》：“枝上花開能幾日？世上人生能幾何？昨朝花勝今朝好，明朝花落隨秋草。花前人是去年身，去年身比今年老。昨日花開又謝枝，明日來看知是誰？明年今日花開否？今日明年誰得知？”仔細翻閱《唐伯虎全集》，還找到不少類似的詩句，都可以作為黛玉《葬花吟》的粉本，曹雪芹寫黛玉葬花的創作雛形是來自唐伯虎的詩歌與軼事。
還不僅如此。《紅樓夢》多次提到唐伯虎，如第二回賈雨村講到天地生人，有聰俊靈秀之氣，可以化為情癡情種，或逸士高人，所舉明朝的例子，就是唐伯虎與祝枝山
第五回寫賈寶玉進了秦可卿的臥室，在夢入太虛幻境之前，看到懸在壁上的畫，就是唐伯虎的“海棠春睡圖”。清楚顯示，曹雪芹熟悉唐伯虎的事跡與書畫，毫無疑問，是以之作為創作的源泉與素材。更明顯的例子是第二十六回，寶玉給薛蟠拜壽，說到寫字畫畫，有這麽壹段令人失笑的文字：
薛蟠笑道：“妳提畫兒，我才想起來了：昨兒我看見人家壹本春宮兒，畫的很好，上頭還有許多的字。我也沒細看，只看落的款，原來是什麽‘庚黃’的。真好的了不得！”寶玉聽說，心下猜疑道：“古今字畫也都見過些，那裏有個‘庚黃’？”想了半天，不覺笑將起來，命人取過筆來，在手心裏寫了兩個字，又問薛蟠道：“妳看真了是‘庚黃’麽？”眾人都看時，原來是“唐寅”兩個字……
這段文字寫得生動精彩，但也是有來歷的。王世懋（1536-1588）的《二酉委譚》就記有壹段故事，是嘲笑壹個北方的低級官員沒有文化，讀不通篆刻圖記，胡攪蠻纏了文徵明與唐伯虎的關系。
晚明文人之間流傳的雅謔，文縐縐的，必須有相當學養，才會為之絕倒，是學者群中通達詩書的笑料。到了曹雪芹的筆下，由薛蟠演示出來，就寫得更為通俗易懂，引人發笑。引用這段素材，在創造人物方面，《紅樓夢》寫薛蟠的不學無術，達到了雅俗***賞的效果