五羊衔谷的神话故事源于裴渊《广州记》，广州大概在唐以后就有羊城、穗城、仙城等别称。仅就我们所见到的材料来说，“五羊”和“楚庭”一词见于最早的古籍记载是裴渊《广州记》。这段晋人的记述材料，有两点值得注意：一是楚庭为楚的宫室或官署或市亭，地点是楚的城市而不是在广州。这一点很重要，因为在以后的史志中记述到楚庭时，愈说愈玄，牵强附会，原因就是离开了这个根本点而望文生义一番。晋时广州的州治在番禺（即今广州市），治所的梁架上画有五羊图，悬挂五谷囊。为什么要画五羊图？裴渊引用了当时人们对古老传说的记述：从前高固（按清人梁廷枏《百越先贤志》说他是越人）为楚相（令尹）时，出现过五羊衔谷聚集到楚庭的事。因为战国时广州属楚，所以把这农牧丰收的祥瑞象征也画在州厅的梁上。高固既然是楚相，必然在楚，他不可能身居岭南越地而为楚相的。换言之，五羊聚于楚庭是出现在高固为楚相的时候，因此，这个楚庭所在地就只能是楚的都城内或楚的某一城邑之中。照文义来说，它就是高固的令尹府衙亦无不可，根本与广州无涉。二是五羊衔谷的神话虽然成了广州历史文化悠久的一个象征，又是妇孺皆知、脍炙人口的一个美好传说。但故事的发生据载最先在楚而不在广州。

《太平御览》引沈怀远《南越志》说：“任嚣、尉佗之时因楚时有羊五色以为瑞，因图之于府厅矣”。可见直到五世纪中叶，五羊的神话传说仍与《广州记》所载基本相同。唐李群玉《登蒲涧寺后二岩》诗有“五仙骑五羊，何代降斯乡”之句（见《全唐诗录》卷84），大概到唐以后不但把五羊衔谷故事的发生地点移到广州，还加了个五仙进去。以后，随着这个神话传说的建祠立祀（北宋时建五仙观），广州的古之“楚庭”一名就逐渐让位于“羊城”这个别称了。《广州记》这段有关楚庭，五羊的记述，本身也是传闻，没有文献与史实可供征信的。

楚庭通常被认为是广州建城之始，顾祖禹《读史方舆纪要》广州城条引唐《通历》：“楚伐杨越，自是南海事楚，有楚亭。”楚子熊渠伐杨越事见《史记·楚世家》：“周夷王时，熊渠兴兵伐庸、杨越，至于鄂地（今湖北武昌县东的鄂城县）。”他的足迹还未越过荆州。直言之，周夷王进（公元前九世纪）楚的势力还未到达今湖南境。至于“杨越”一词，古籍中往往是泛指百越之地。如《史记·南越列传》的“略定杨越”。古属杨州，所谓“扬州之南，越地也”；又如《史记·货殖列传》“而杨越多焉”。这泛指百越之民。还有“南海”一词，也是对南方各族居地的泛称。《国语·楚语上》有“抚征南海”一句，这个南海指的是江南地。又如《左传·僖四年》：齐伐楚，“楚子使与师言曰：‘君处北海，寡人处南海，风马牛不相及也’”。这个“南海”是指我国江南的广大区域而言，因此，“伐杨越”事无论从时间、地点、人物活动的内容来说，都与岭南的南越毫无相干。《通历》的原文我们未得见，仅就引文而论，也不能证明“南海事楚”的“南海”指的就是广州。顾祖禹把它写入广州城条内，以致将广州城市的兴起提早到西周时期，楚庭成了广州最早出现的城市的名字，这是前人在地理概念上的模糊而产生的误解。

2006年11月26日，第十六届亚运会组委会在广州中山纪念堂举行2010年亚运会会徽发布仪式，广州设计师张强以柔美上升的线条，构成了一个造型酷似火炬的五羊石像外形轮廓，象征着亚运会的圣火熊熊燃烧、永不熄灭。这个既象征着“羊城”广州，也表达了广州人民的美好愿望，还表现了运动会应有的动感，该设计方案成为2010年广州亚运会会徽。