江渚风林图曾著录于吴湖帆丑簃日记1938年3月3日的日记中：

又蒋穀孙取来云林小幅，即董香光赏识之“江渚暮潮初落，风林霜叶浑稀。wwんw．．

倚杖柴门阒寂，怀人山色依微。

至正癸卯九月望日戏为胜伯徵君写此，并赋小诗。

倪瓒一图也。

此画为项子京旧藏，后归高江村，载入销夏录中者。

下角有“宋学士景濂”一印，精品也。

“宋学士景濂”印应是“金华宋氏景濂”印。

但在当天的日记中并未明确记载：江渚风林图是还给了蒋穀孙，还是留在了梅景书屋。

而在三个月后的6月26日日记中又有记载曰：

曹友卿携穀孙易物来，带去倪云林江渚风林图、毛影宋钞梅屋诗余、石屏长短句、槃斋乐章三书、花草粹编一部、金孝章校明钞金国南迁录一本、宋刻后村词一卷，倪画原非易中物，毛钞梅、石二种余旧藏。

带来余旧藏汉侯獲碑二轴、元拓史晨前后碑二本、明拓景君、韩敕、郑固三碑及张伯雨书轴。

以上三物去年易去，余为托穀孙经售梁楷画，故易之。

后梁画未成交，余欲易还，而穀孙不肯，索之再三，终不理会。

近观云林江渚风林图被余扣住将一月，乃得将原物易归，盖五汉碑皆外祖沈公物也。

上述之事的大致经过是：

吴湖帆曾委托蒋穀孙卖掉一幅梁楷画，而将汉侯獲碑等五种汉碑拓本转卖给了蒋氏。

但因梁楷画后来未能成交，所以吴湖帆就想将五种汉碑拓本赎回。

但他再三追索，蒋氏始终不肯。

而恰好蒋氏的藏品江渚风林图一个月前已在吴湖帆手中，所以扣下倪画不还。

蒋氏无奈之余，只得托曹友卿将五种汉碑拓本归还。

而吴即将梅屋诗余等六种古籍和钞本抵作购回五种汉碑拓本的价款，同时也将江渚风林图还给了蒋氏。

吴湖帆外祖父沈树镛旧藏五种汉碑拓本，除郑固外，其余四种均著录于沈氏郑斋金石题跋记一书中，可谓是梅景书屋中的祖传之物。

虽非稀世名拓，但对吴湖帆而言，其中寄托了有一种对祖先的特殊情感。

而吴湖帆当初之所以要将之转让给蒋穀孙，都是因为那幅梁楷睡猿图所“惹的祸”。

上世纪三十年代初，张大千在苏城网师园中，以宋人佚名一说是牧溪册页睡猿图为蓝本，赝制睡猿图轴，并署南宋画家梁楷款。

伪添南宋著名刻书家、贾似道门客廖莹中题字：“梁风子睡猿图神品”。

并用木印仿制名家鉴藏印钤于图上，又请苏城人周龙苍做旧。

再暗托津城某古董商携至上浦兜售，云是从清宗室府中流出，据传当时售价为十两黄金。

后此图为吴湖帆收藏，成交价格不详。

吴湖帆还将此图著录于吴氏书画记卷一中。

时张大千与吴湖帆交往甚密，常至梅景书屋鉴赏书画。

当张见此图已被吴视为珍秘之物时，又不便明言，只是婉转告知此图似不可靠，暗示应转售此图。

吴湖帆时在上浦书画鉴定界号称“一只眼”，自负甚高，故不为所动。