由于家境衰落，曹雪芹的后来生活极端困苦，曹雪芹的朋友敦诚、敦敏和张宜泉诸人的诗篇中有关曹雪芹的记录，从中就可以知道。在敦敏的《赠曹雪芹》中写道：寻诗人去留僧壁，卖画钱来付酒家。燕市狂歌悲遇合，秦淮旧梦忆繁华。敦诚在《赠曹雪芹》中写道：满径蓬蒿老不华，举家食粥酒常赊。衡门僻巷愁今雨，废馆颓楼梦旧家。从这些诗句中，可以看出曹雪芹的贫困生活。房屋破败，全家穷到吃粥，酒钱也付不出，靠卖画来贴补家用。秦淮风月，金陵脂粉的旧日繁华，同今天的衰败零落形成了一个鲜明的对照。
敦诚说他“于今环堵蓬蒿屯”。敦敏《访曹雪芹不遇》中说“柴扉晚烟薄，山村不见人”，张宜泉在《和曹雪芹西郊信步憩废寺原韵》的诗里，有“寂寞西郊人到罕”之句，在《题芹溪居士》诗里有“庐结西郊别样幽”之句，这些都是曹雪芹从“花柳繁华地，温柔富贵乡”跌落到“满径蓬蒿老不华，举家食粥酒常赊”的穷困境地的证明。