冯衍约七十二岁，因谗被废于家；出后妻任氏，作《与妇弟任武达书》《与宣孟书》。

《后汉书•冯衍列传》卷二十八下：“显宗即位，又多短衍以文过其实，遂废于家。……衍娶北地任氏女为妻，悍忌，不得畜媵妾，儿女常自操井臼，老竟逐之，遂至埳壈于时。”李贤注：“《衍集》载衍《与妇弟任武达书》曰：‘天地之性，人有喜怒；夫妇之道，义有离合。先圣之礼，士有妻妾，虽宗之眇微，尚欲逾制。年衰岁暮，恨入黄泉，遭遇嫉妒，家道崩坏，五子之母，足尚在门。五年已来，日甚岁剧，以白为黑，以非为是，造作端末，妄生首尾，无罪无辜，谗口嗷嗷。乱匪降天，生自妇人。青蝇之心，不重破国；妒嫉之情，不惮丧身。牝鸡之晨，唯家之索，古之大患，今始于衍。醉饱过差，辄为桀纣，房中调戏，布散海外，张目抵掌，以有为无。痛彻仓天，毒流五臧。愁令人不赖生，忿令人不顾祸。入门著床，继嗣不育，纺绩织纴，了无女工，家贫无僮，贱为匹夫，故旧见之，莫不凄怆，曾无悯惜之恩。唯一婢，武达所见，头无钗泽，面无脂粉，形骸不蔽，手足抱土。不原其穷，不揆其情，跳梁大叫，呼若入冥，贩糖之妾，不忍其态。计妇当去久矣，念儿曹小，家无它使，哀怜姜、豹，当为奴婢。恻侧焦心，事事腐肠，汹汹籍籍，不可听闻。暴虐此婢，不死如发，半年之间，脓血横流。婢病之后，姜竟舂炊，豹又触冒泥涂，心为怆然。嫌縠放散，冬衣不补，端坐化乱，一缕不贯。既无妇道，又无母仪，忿见侵犯，恨见狼藉，依倚郑令，如居天上。持质相劫，词语百车，剑戟在门，何暇有让? 百弩环舍，何可强复? 举宗达人解说，词如循环，口如布谷，县幡竟天，击鼓动地，心不为恶，身不为摇。宜详居错，且自为计，无以上书告诉相恐。狗吠不惊，自信其情。不去此妇，则家不宁；不去此妇，则家不清；不去此妇，则福不生；不去此妇，则事不成！自恨以华盛时不早自定，至于垂白家贫身贱之日，养痈长疽，自生祸殃。衍以室家纷然之故，捐弃衣冠，侧身山野，绝交游之路，杜仕宦之门，阖门不出，心专耕耘，以求衣食，何敢有功名之路哉！’”又李贤注：“衍《与宣孟书》曰：‘居室之义，人之大伦。思厚欢和之节，乐定金石之固。又自伤前遭不良，比有去两妇之名。事诚不得不然，岂中心之所好哉！’”按，《后汉书》本传虽载冯衍第二次出妻事，然不详其年，其《与妇弟任武达书》云“至于垂白家贫身贱之日，养痈长疽，自生祸殃”，似可推知出任氏乃在其晚年被废、身贱家贫之时。