后来潘谷不幸醉酒落井而死。他的朋友苏轼写诗纪念他，其中有两句说：

“布衫漆黑手如龟，未害冰壶贮秋月。”

一个只顾埋头工作、不拘小节、但品行正直的形象跃然纸上。

“冰壶秋月” 中冰壶指盛水的玉壶，比喻洁白明净。多借指人的品格。

（出自苏轼《赠潘谷》）