許衡領著他的學生奔波于戰亂之途。經一梨園，學生迫于饑渴紛紛摘果。許衡端坐園側巋然不動。
　　
　　學生說：園為無主之園，梨為無主之梨。
　　
　　許衡答：梨園無主，我心有主。
　　
　　之后，許衡入仕。
　　
　　之后，見官場污濁，時時扼腕嘆息。
　　
　　友人勸：時下世心無主。
　　
　　許衡答：世心無主，我心有主。
　　
　　遂辭官。辭呈說：
　　
　　以權治國，不過當世；以利治國，不及三代；以德治國，長治久安。
　　
　　許衡曾留下一方驚堂木，堅硬沉實，擊案錚錚有余音。這方警世之木，乃梨木雕成。
　　
　　許衡歿，后人在墓側植一梨園。梨園碩果壓枝而無人私取。