传说当年刘备败走襄阳，马跃檀溪，夜访水镜庄，幸得水镜先生指点，乃有备三顾茅庐，诸葛亮纵论天下的《隆中对》，诸葛亮助刘备图霸业之时，广纳四方贤才，其中就有一位出生入死的患难兄弟，宜城的廖化、谷城的延岑，廖延二将军追随诸葛孔明，为蜀国的建立立下了汗马功劳，深得先帝刘备及丞相孔明的信赖与赞誉。
诸葛亮出祁山之时，延岑追随左右，不料突患重病逝于征战之中，亮甚为悲痛，特命廖化送延将军归葬故里谷城，行前亮对廖化说：“延将军一世英名，骨高气傲，其志唯银杏可明，烦请廖将军选一可经万世风雨之银杏，栽植在延将军坟前，让其陪伴将军左右，为其作伴守护吧”！故此，才有眼前这颗从蜀国故都成都移来的银杏树，屈指算来，此树距今已有一千八百余年了。
明朝末年，李自成、张献忠谷城聚会，自成慕延将军英名，前来凭吊，见得此树，顿生崇敬之意，谓左右曰：“此树历经千年，其志不改，且久纳天地之精华，已非常树乃神化之物，当称银杏王，汝等要好好敬奉才是”，言毕，三叩首后离去......
1950年9月，银杏树下迎来一支谷医的创业者，从此，他们在银杏树下播撒辛勤的汗水，使银杏之树枝繁叶茂，春意盎然，如今银杏树已成谷医的精神象征、文化图腾。被当地百姓奉为神灵，常有慕名者前来敬拜，1980年银杏王被谷城县人民医院确立为重点文物保护单位，后人有诗曰：
铁骨丹心银杏王，披霜傲雪阅沧桑。
喜迎谷医作佳邻，杏林花开洒清香。