辛棄疾好色之事，證據確鑿。例如開禧元年，辛棄疾起復知隆興府，同年便遭到浙東安撫使韓侂冑彈劾，說：“以臣僚言棄疾好色貪財，淫刑聚斂。”就連他自己也曾經說自己“自笑好山如好色。”（《浣溪沙偕叔高、子似宿山寺戲作》）
辛棄疾既然有好色的這麼一個特點，並且還成為政敵彈劾他的依據，那麼他一生中經歷的女人絕對不少。鄧廣銘先生曾作《辛稼軒年譜》，裡面對於辛棄疾一生所經歷的女人做了一個統計。雖然也許並不齊全，但是其數目也是不少。辛棄疾除了原配夫人範邦彥之女範氏之外，有具體名目可查的女人有：整整、錢錢、田田、香香、卿卿、飛卿等侍妾。
這些名字當然不可能是學者亂說，自然有其來源。關於整整，宋周煇《清波別志》記載：“辛稼軒在上饒，屬其室病，呼醫對脈，吹笛婢整整者侍側，乃指以謂醫曰：‘老妻病安，以此人為贈。’不數日果勿藥，乃踐前約。”因為大夫治好了病，所以辛棄疾將整整送給了大夫。
辛棄疾所作之詞，《鷓鴣天·困不成眠奈夜何》和《滿江紅·莫折荼蘼闋》都分別提到了兩位侍妾。《鷓鴣天·困不成眠奈夜何》：“嬌痴卻妒香香睡，喚起醒松說夢些。”這裡提到了香香。《滿江紅·莫折荼蘼闋》：“稼軒居士花下與鄭使君惜別，醉賦，侍者飛卿奉命書。”，這裡提到了飛卿。
另一首詞《西江月·題阿卿影像》記：“人道偏宜歌舞，天教只入丹青，喧天畫鼓要她聽，把著花枝不應。何處嬌魂瘦影，向來軟語柔情，有時醉裡喚卿卿，卻被旁人笑問。”這裡的卿卿，應當不是飛卿。雖不知卿卿到底是此女之名，還是辛棄疾對女子的愛稱，但她也是辛棄疾的女人之一。
元人陶宗儀《書史會要》卷六說：“田田、錢錢，辛棄疾二妾也。皆因有其姓而名之，皆善筆札，常代辛棄疾答尺牘。”根據陶宗儀所記，辛棄疾還有田田、錢錢等侍妾二人。
馮金伯《詞苑萃編》記：“京畿有二漕，一呂晉，一呂正已。晉家諸姬甚盛，必約正已通宵飲。呂婆一旦大怒逾牆詈之，晉子一彈碎其冠，事徹孝皇，兩漕即曰罷，呂婆有女事辛幼安，以微事觸怒逐之。今稼軒桃葉渡詞因此而作。”也就是說除了有名字的侍妾二人，還有一位呂婆之女也是辛棄疾的女人之一。
除了這些良家女子，辛棄疾還時常逛妓院。卻不知又入了多少女子的裙下，與多少女子有過一夕之歡。
後世人認識到辛棄疾大多數源於他氣勢恢宏的詞作，很少有人瞭解到真實生活中的他。辛棄疾好女色之事，也算是他的一個趣談了。
辛棄疾一生詞作無數，他閒居在家之時，多數以作詞來寄託情懷，所以為後世留下了許多優品佳作。本文只列舉幾首耳熟能詳之詞，供讀者賞閱。
《青玉案·元夕》
東風夜放花千樹，更吹落，星如雨。
寶馬雕車香滿路。鳳簫聲動，玉壺光轉，一夜魚龍舞。
蛾兒雪柳黃金縷，笑語盈盈暗香去。
眾裡尋他千百度，驀然回首，那人卻在，燈火闌珊處。
《醜奴兒·書博山道中壁》
少年不識愁滋味，愛上層樓。愛上層樓，為賦新詞強說愁。
而今識盡愁滋味，欲說還休。欲說還休，卻道天涼好個秋！
《菩薩蠻·書江西造口壁》
鬱孤臺下清江水，中間多少行人淚！
西北望長安，可憐無數山。
青山遮不住，畢竟東流去。
江晚正愁餘，山深聞鷓鴣。
《清平樂·村居》
茅簷低小，溪上青青草。醉裡吳音相媚好，白髮誰家翁媼？
大兒鋤豆溪東，中兒正織雞籠；最喜小兒無賴，溪頭臥剝蓮蓬。
《永遇樂·京口北固亭懷古》
千古江山，英雄無覓孫仲謀處。舞榭歌臺，風流總被雨打風吹去。斜陽草樹，尋常巷陌。人道寄奴曾住。想當年，金戈鐵馬，氣吞萬里如虎。
元嘉草草，封狼居胥，贏得倉皇北顧。四十三年，望中猶記，烽火揚州路。可堪回首，佛（bì）狸祠下，一片神鴉社鼓。憑誰問：廉頗老矣，尚能飯否？
《西江月·夜行黃沙道中》
明月別枝驚鵲，？清風半夜鳴蟬。？稻花香裡說豐年，？聽取蛙聲一片。
七八個星天外，？兩三點雨山前。舊時茅店社林邊，？路轉溪橋忽見。