所以后人评价倪瓒的画是“胸中净无尘”。与其说倪瓒是洁癖，倒不如说他是把文人的那种高洁和孤傲发挥到了极致。可惜的是，尽管他的内心再宁静，世道却不能停止纷扰。
元末起义军四起，社会一片动荡。
其中一支起义军的头头儿张士信，听说倪瓒的画非常好，就差人送了很多钱给倪瓒，请他作画。倪瓒不愿意，当着人的面把绢撕了，把钱退了，还放话说“倪瓒不能为王门画师”。
终于有一次，张士信在太湖边上逮着了倪瓒，叫人把倪瓒抓过来给了他一顿鞭子。但是不管再怎么打，文弱书生倪瓒都被打趴下了，他依然是一声不吭。倪瓒说“不可出声，一出声便俗”，意思就是说我一跟你说话，我人就变俗了。
后来张士信实在拿他没辙，就想说好，那你不是洁癖吗？行，我把你绑在粪桶边上，我折磨你，把你折磨死。
关于倪瓒的结局历来有两种说法，一种说倪瓒患了痢疾，粪便拉得满床都是，恶臭熏天，没有人敢靠近他。还有另外一种说法，明初朱元璋想要请他入朝为官，被他拒绝了。倪瓒作了一篇《题彦真屋》，诗云“只傍清水不染尘”，表示不愿做官。朱元璋恼羞成怒，就叫人把倪瓒活活扔到粪坑里面淹死了。
