早年南雅梅村有一个书生，孤身一人，家里很穷，边教私塾边念书，准备求取功名。
他厝隔壁有座观音堂，观音堂里不晓得什么时候起就住着一位老婆婆，整天念经，也是孤身一人。书生经常帮她挑水、上街买菜，后来，老婆婆就认书生做义子。
有一年大考年头，书生和老婆婆商量，打算上京赶考。老婆婆叹一口气说：“富贵功名，转眼皆空，你心地正直，不是做官的人。”但是书生一心想考，老婆婆也不再阻扰。
过了几天，书生拜别义母上路。书生文才很好，三场应试，中了进士，分发去广东省某县当知县。他顺路回转家乡，想接义母去上路。这一天，来到家乡南雅梅村，坐着绿呢官轿，一路鸣锣喝道，来到观音堂。想不到观音堂依旧，老婆婆却不见了，附近乡人告诉他，老婆婆在他上京赶考的第二天，就进山修行去了。知县吩咐调转官轿，去寻义母。来到溪边，有一座独木桥挡路。知县只好下轿，叫差役轿夫在路边等，自己一人走过桥去。
知县过了独木桥，向山里走去，足足走了三天三夜，才发现山顶上有一间茅屋。爬上去一看，老婆婆正在屋里，知县看见这样环境，知道老婆婆已决心修行，婆婆留他住了一夜，知县次日就拜别下山。
知县来回走了六天六夜，回到独木桥边一看，好像附近村子有些变样，独木桥边那顶官轿，象是受了风吹雨淋，已经破旧不堪，差役轿夫一个也不见了。他拉住一个农民，问他这顶轿为什么这么破？那人说：“大约五六十年以前，有个知县下轿进山寻找义母，一去没有回头，丢下这顶绿呢大轿，现在都破烂了。”知县大惊说：“我才去了六天，怎么说是六十年？”这一来，看热闹的人都围上来。大家见他纱帽官服，说话疯疯癫癫，都很奇怪，忽有一个八十多岁的老人走上前说：“不错不错，你就是当年那位知县。”
原来知县进山六天，世上已经过了六十年，想再去做官也做不到了，他想起义母的话：“富贵功名，转眼皆空。”于是，掉转头又跑上独木桥，找他的义母去了。
后来人们就在放轿子的地方建起一座亭子，取名“绿轿亭”。