相传5000年前，巢父在池边牵牛饮水时，批评一代圣贤许由“浮游于世，贪求圣名”，许由自惭不已，立即用池中清水洗耳、拭双目，表示愿听从巢父忠告。后人为颂扬许由知错就改的美德，遂将该方池取名为“洗耳池”，成语“洗耳恭听”的典故也由此产生。

　　传说，上古时代的尧，想把帝位让给许由。许由是个以不问政治为“清高“的人，不但拒绝了尧的请求，而且连夜逃进箕山，隐居不出。

　　当时尧还以为许由谦虚，更加敬重，便又派人去请他，说：“如果坚不接受帝位，则希望能出来当个“九州长”。不料许由听了这个消息，更加厌恶，立刻跑到山下的颖水边去，掬水洗耳。

　　许由的朋友巢父也隐居在这里，这时正巧牵着一条小牛来给它饮水，便问许由干什么。许由就把消息告诉他，并且说：“我听了这样的不干净的话，怎能不赶快洗洗我清白的耳朵呢!”，巢父听了，冷笑一声说道：“哼，谁叫你在外面招摇，造成名声，现在惹出麻烦来了，完全是你自讨的，还洗耳恭听什么耳朵!算了吧，别沾污了我小牛的嘴!”，说着，牵起小牛，径自走向水流的上游去了。

　　据传，孔子周游列国曾途经居巢，由于急赶路程，过桥时，不慎将车上书简坠入了洗耳池，路人下水拾起书简并放在一块大石头上晾晒，耽误了很多时间，孔子懊恼地说“真乃欲速则不达也”，当年晒书的石头被后人保存下来并取名孔子晒书墩，“欲速则不达”也成了至理名言而流传至今。