徐渭《墨竹图》

徐渭年幼时，还在上私塾，老师看他聪明伶俐，便要考考他，让他拿着两个水桶去汲水，期间要度过独木桥，当时徐渭尚小，力气也不足，自是困难，但是塾师看见徐渭高兴地抬水回来，惊问方法，他高兴地说：把水桶放水里自然轻松多了！当时尚无浮力一说，徐渭的聪敏，让老师大加赞赏。

徐渭经历了如此多的磨难，徐渭已不再有什么政治上的雄心，但他对国事的关注却老而未衰。出狱后，他先在江浙一带游历，登山临水，并交结了许多诗画之友。万历四年）夏，徐渭年轻时代的朋友、此时已经担负北部边防重任的吴兑邀他北上，他便欣然前往。徐渭在宣化幕府的时间不到一年，但留下了不少描写北地风光、民俗和军旅生活的诗文。在写给许多官员的赠序中，他都喜欢议论政事，尤其是关于边防的策略。当时张居正主持国政，对蒙古采取抚和的方针，徐渭对此表示赞赏。期间又过居庸关赴塞外宣化府等地，闻戚继光所云至辽东寻李成梁，教授其子李如松兵法，结识蒙古首领俺答的夫人三娘子。他在吴兑那里受到敬重，无奈身体不好，只得于次年春经北京回到家乡绍兴，注释郭璞《葬书》。