临安锦北街道的集贤村，又名棋园里。村子东边小山上有一块大石岩。这一天，正是初冬时节，吕洞宾与铁拐李在这里相遇，多日不见，棋瘾上来，便相约在暖洋洋的太阳窠里手谈两局。

两位仙人摆好棋局，你来我往，争斗方酣，正在难分难解之时，有一群过冬的麦老鸦从东山过来，飞经大石岩的上空，叽叽喳喳地叫个不停，已经让两位仙人心中感到烦躁，更有一只倒霉蛋，还撒下一泡屎，不偏不倚，正巧落在了棋盘上，把两颗棋子也给沾污了。好好的棋局被搅了，两位神仙气不打一处来。

铁拐李用手指向空中一指，嘴里念念有词，使个定身法，麦老鸦便被定在空中，动弹不得了。

而吕洞宾则捞起棋盘上所有的棋子，往空中一扔，更让那群麦老鸦吓得全身发抖，晕头转向。吕洞宾还对着麦老鸦大吼一声：

“你们这群讨厌的家伙，从今以后，不准飞过这个村子。”

经他这一喝，果然再也没有麦老鸦从这里飞过了。

棋子的呼啸声，同时也解开了铁拐李的定身之诀，麦老鸦慌慌张张，一只只四处散逃开去。

两位仙人只是吓唬吓唬这群麦老鸦，见到它们狼狈的样子，哈哈大笑，携手腾云飞走了。

那三十二颗棋子从空中掉了下来，有规律地掉在了村子的中间，竟然砸出了三十二口井，井的布局，恰似一个棋盘。

因此，人们后来就将这个村子叫作棋园里。

这则传说一直流传在民间，最初为《中国民间文学集成·浙江省临安县卷》收录，由盛连宝讲述，盛金声记录。《临安地名词典·第三章地名故事》中也有记载：“据清宣统《临安县志》卷一‘山川’载：‘集贤山，治北八里，宋元间出进士十八人。’村以山名。传说一日，吕洞宾与铁拐李在村东小山石台下棋，天空飞过一群麦老鸦，其中一只撒屎，正巧落入棋盘。二神仙十分气恼。铁拐李用手指向上一指，使个定身法，麦老鸦被定在空中。吕洞宾抓起一把棋子，将麦老鸦砸得晕头转向，并喝令以后不准飞经集贤上空。那一盘棋子掉落村中，变成三十二口井，恰似摆好的棋盘，故村又俗称‘棋园里’。”

  但是，在康熙十四年《临安县志·卷一》却这样记载：“集贤山，八里。宋元间出进士十八人，故名，今不可考。传谢安尝游此奕棋，有下麦鸦粪污其首，安以手指之，遂去。自后集贤一境无鸦患。”却是将故事记在了谢安谢太傅的头上。谢安隐居的东山就在集贤村的边上。