宋人王銍的《默記》中載，宋徽宗做皇帝后，翻出章惇當年以“端王輕佻”爲由阻止自己上位的舊賬，藉口他曾怠慢、詆譭宣仁太后，將他貶到睦州做參軍。
此時章惇已是風燭殘年，他深知自己得罪的舊黨中人太多，這輩子很可能再也無法返京，於是樂得遊山玩水，尤其喜歡訪禪問道，過着閒雲野鶴的生活。更讓他得意的是納了個年方二八的小妾，名叫茜英，秀外慧中、善解人意，深得他的寵愛。
一天，章惇的兒子章援去烏龍寺拜訪住持，恰巧住持不在，他便在住持的禪房裏翻看字畫，忽然發現一方用作鎮紙的玉界尺格外眼熟，仔細一看可不得了—那是他老爹心愛的文玩，怎會在此?
章援覺得事有蹊蹺，也不作聲，悄悄將玉界尺揣入懷中，回家後召集府中丫鬟，嚴詞責問。幾個丫鬟這才戰戰兢兢地吐露真言，原來茜英早與住持暗通款曲，那玉界尺估計就是她偷偷送給住持的。
章惇聽了兒子的彙報，起初根本不信—我待茜英不薄，魅力難道還不如一個和尚?他甚至懷疑一衆丫鬟是因妒恨茜英而故意構陷，於是找來茜英親自詢問，誰知茜英竟供認不諱。章惇雖羞惱不已，但忘不了茜英的好處，覺得她也不易，只要能回心轉意，他便不再追究。於是他讓茜英換上布衣、做些粗活，指望她受此懲戒後能改過自新。但其他丫鬟就沒這麼幸運了，成了章惇撒氣的對象，被捆起來暴打一頓。
章惇指使章援將住持痛毆一頓後押送官府，以斷茜英的念想。郡守一看昔日丞相受辱，不敢怠慢，親自審問並以大刑伺候。誰知住持竟有幾分功夫，衙役使勁用棍打他的背，堂中灰塵都被震得四下亂飛，他卻巋然不動、穩如泰山。有傳聞說他是寄身佛門的世家子弟，郡守怕惹麻煩，關他幾天了事，此後他便遠走他鄉。
茜英倒是癡情，過了一個月的苦日子，形容憔悴，卻仍不改心志，沒說半句求饒的話。章惇心下不忍，對她說：“你還是像以前那樣服侍我吧，舊事不再提了。”可茜英聽說住持離開的消息後肝腸寸斷，萬念俱灰地說：“您還是把我押送官府吧，如今我只欠一死。”
章惇終究捨不得她，將她軟禁起來，吩咐下人嚴防她尋短見。一天，茜英走進章惇的書房，捧起那方玉界尺慟哭不已，下人聽得心煩，紛紛避開。茜英擦乾眼淚，略施粉黛後懸樑而亡。章惇傷心欲絕，此後再沒納妾。
宋人筆記中關於章惇的八卦還有很多，比如他是父親與其外祖母亂倫而生，還有他與嬸孃偷情的醜事等。其實這些“驚天大瓜”不見得保真，更像當朝文人爲發泄私怨或公憤而潑向他的髒水，誰讓他爲相時不肯積德，把舊黨中人往死裏整，連老友蘇軾都不放過，還建議宋哲宗將死去的司馬光、呂公著剖棺鞭屍。這些素有清名雅望的人遭此大劫，他們的徒子徒孫怎肯善罷甘休，自然要把章惇往死裏罵。
