另有一个关于徐渭的小故事，也能凸显他的聪明才智。在他年幼时，还在上私塾，老师看他聪明伶俐，便要考考他，让他拿着两个水桶去汲水，期间要度过独木桥，当时徐渭尚小，力气也不足，自是困难。

但是塾师看见徐渭高兴地抬水回来，惊问方法，他高兴地说：把水桶放水里自然轻松多了！

当时尚无浮力一说，徐渭的聪敏，让老师大加赞赏。据说这个故事还被搬上了H国学生的课上。

不过自幼以才名著称乡里的徐渭，一向颇有些自负自傲，对功名事业充满了向往，然而在科举道路上却屡遭挫折。

二十岁那年，他才考中了秀才，此后多次参加乡试，直到四十一岁，考了八次，始终也未能中举。其间还经历了丧妻之痛，以教书糊口，直到三十七岁时应胡宗宪之邀，入幕府掌文书。

徐渭在科举中一再失败，并不是偶然的。他暮年作《自作畸谱》，还特地记下了六岁入学时所读的岑参《和贾舍人早朝》诗句：“鸡鸣紫陌曙光寒”，流露出无穷的人生感慨。

不过老天似乎并不眷顾他，嘉靖年间，东南沿海遭受倭寇的频繁侵扰，由于兵备松弛，官吏无能，给人民的生命财产带来惨重损失。徐渭一方面以诗歌对此进行尖锐的抨击，一方面满怀热忱地投入到抗倭战争中。