说起20世纪中国画大家，齐白石和黄宾虹双峰并立成为一个世纪的中国画代表在今天已经成了常识，齐白石和黄宾虹都享有高寿，都是在1950年代去世。两人有一个共同点，就是其画作都是到中年之后也就是进入晚年才赢得越来越大的画名，在其同时代的画家里，有许多，在当年其实是很瞧不上他们的。黄宾虹在同时代的画家文人眼里更是知音寥寥，被讥为“落魄画家”和“老糊涂”之类。
　　吴湖帆1937年3月10日的日记：“竟日天雨。叶遐丈、徐俊卿、徐邦达来谈。故宫之马麟画《层叠冰绡图》（绢本，至精，有宋宁宗、杨叔子题。）、江贯道《千里江山图》卷（绢本，至精，有刘后村、林希逸等跋。）、赵松雪《古木竹石》（最晚年时作）、王烟客为其婿画杜诗意十二帧（洁白如新，每开以隶书杜诗两句，烟客中第一精品也，七十四岁作。）以上四件及黄鲁直仿怀素卷等若干件，俱被法院封存。法院根本不知，仅就一名为鉴定人之老糊涂颠倒黑白、乱点鸳鸯的判断而已。古人何罪，精神上大吃官司，冤哉枉也！法院之无识可想而知，而所谓鉴定人之无识，真该死也。”这段吴湖帆的日记可以说对黄宾虹的态度可谓尖酸刻薄，“老糊涂”、“真该死也”，这是黄宾虹同时代的学人书画家在自己的日记题跋里所写对黄宾虹的态度，因为这样的日记题跋不是为出版的，所以可以说道出了他们的真实看法。
　　“落魄画家”用来形容黄宾虹并非过于刻薄，例如有一段关于黄宾虹当年寓居上海的描绘：黄宾虹寓居上海时，生活颇为艰辛，他租了间陋室，屋里无任何设备，房租却一涨再涨，以至终于负担不起，“常因觅屋不得，为之栖栖遑遑。”有时因为买不起菜，只能连吃若干天白饭了；车自然也坐不起，多远的路都走着。
　　在1949年之前，黄宾虹其实只举行过一次个人画展，这一次画展还是傅雷等人给他举办的—在抗日战争时期沦陷区的上海，1943年傅雷与友人为蛰居在北京的黄宾虹八十寿庆举办了《黄宾虹书画展》，并印制了画册，傅雷还撰写了《观画答客问》，对黄宾虹的画作推崇备至，这也是那个年代对黄宾虹画作最为称道的评价。为撰写此评论，傅雷在1943年9月1日写给黄宾虹的信里说：“晚七年来蛰伏蜗居，搁笔已久，倘明公不以痴人说梦为慊，亦愿破戒为尊画略作说明。画会形式及文字宣传，愚意力主朴实，以天真淡泊之艺术家本色，一洗时下买空卖空之恶习，故将来为画展所作文字，拟侧重于研究方面……”为此，黄宾虹将傅雷引为知己。
　　这次画展结束后，傅雷写信给黄宾虹：“此次展览，无论在品质方面，出售方面，均为历来画会所未有，即沪上人士盲捧之张大千，亦从未有全部告罄之记录。可见吾公绝艺尚有识者，不獨为先生贺，并足为艺坛前途庆。”今日看来，不能不说，傅雷的艺术鉴赏力是超越同时代许多艺术家的。
　　抗战时黄宾虹在北京“谢绝应酬，唯于故纸堆中与蠹鱼争生活”，很少与外界来往，据《黄宾虹年谱》记载，曾有日本画家荒木石亩登门拜访，黄宾虹以“私人交情再好，没有国家的事情大”为由避而不见。1941年黄宾虹曾被日军拘捕，虽审问时间较长，但未拘押过夜。尽管黄宾虹还被北平文物研究会推为美术馆馆长，也婉辞不就。在民族气节问题上，黄宾虹的表现与当时也蛰居北京的齐白石老人一样。
　　1948年夏，黄宾虹应杭州艺专之聘离开北京南归。1949年10月1日后，仍任杭州艺专教授。1950年成为全国政协委员。1953年黄宾虹九十岁时，华东行政委员会文化局授予他“中国人民优秀的画家”称号。黄宾虹自题诗一首：和合乾坤人不老，平分昼夜日初长。写将浑厚华滋意，民物新新见阜康。
　　1955年3月，黄宾虹逝世，享年九十二岁。