王憨山因明德与国立三中两校北返，仅任教一个学期，1946年春又转到了在湖南沅陵的国立第九战时中学，仍教图画。但他心中念念不忘他向往的文人画，想继续未完成的学业，便于是年秋天，离开了沅陵。

1947年夏，王憨山赶到南京。此时他的目标已不是南京美专，而是更高的学府——中央大学美术系。王憨山打听到主持中大美术系的是著名山水画家傅抱石，想直接登门拜访。盘桓数日，他从瓜农手中连担带瓜一起买下挑到了傅抱石的家里。王憨山放下担子，恭恭敬敬地向傅抱石鞠了一躬，掏出南京美专临时结业证书与自己几张习作递上去，傅抱石看出这个年轻人的画如其人，也是那么狂放不羁。傅抱石说：你跟高希舜先生学过，是画花鸟的，而我是画山水的，带你不合适，你可去找潘天寿。

王憨山拿着傅抱石的亲笔信急忙赶到杭州。潘天寿看完信，沉吟片刻，说：“我不能挖高先生的墙脚。”王憨山急了，开弓没有回头箭，他已没有退路，“扑通”一声跪在地下，说：“潘先生，高先生领我进门，我一生都不会忘记。傅先生介绍我来，是想让我跟您走阔笔大写意的路子，进一步学点新的东西。请先生收下我吧!”潘天寿没有想到这个看似狂傲的学生，会在他面前下跪，说：“你先起来，起来说话。”王憨山没有起来：“我跟定了先生，就是不入学籍做个旁听生也要得。”“那你就来旁听吧。”看来不答应他是不会起来的，潘天寿接着说，“学费可以不收，食宿你自己想办法。”

距离王憨山在杭州求学65年之后2012年4月，王憨山作品展在杭州举行。图左2是本文作者尹晓奔

在杭州国立艺专，潘天寿无论讲学，还是指导作画，给王憨山坚定走文人画的路子以很大的启迪。王憨山曾对人说，潘先生虽只教了一年多的时间，却使他终生受益，先生如椽巨笔能起钱江大潮。

1947年5月，北平爆发了“反饥饿、反内战”的学生运动。接着波及全国，杭州国立艺专的部分师生也参加了。王憨山一直钻在他的文人画里，这时才如梦方醒，偌大的中国已摆不下一张平静的课桌。