“ 浮晖翻高禽，沉景照文鳞。双江汇西奔，诡怪潜坤珍。孤山乃北峙，森爽栖灵神。洄潭或动容，岛屿疑摇振”柳宗元的这首《登蒲州石矶望横江口潭岛深迥斜对香零山》写的就是零陵香零山的景色。
香零山位于永州市零陵区茆江桥潇水河心，系天然石矶组成的小岛，东西长约20 米，南北宽约 15 米，高出水面 8 米，是一座四面环水的小岛。香零山山势险峻，风景优美，春流荡荡之时，有如贴水芙蓉，与波明灭；秋高水落之时，则亭亭孤寺，不可攀跻；若雨后日出，烟绕山脚，缕波而起，林螟江动，水叫石激；往来舟楫若影若现，如有置身烟波浩淼之境，故有“香零烟雨”之美称。
“人说海上有仙山，山在虚无缥缈间”。在淫雨霏霏的春天，霭气和雾气相连，云气和水汽交映，日月星晨失去了光辉，山岳潜没了形态，舟楫不再行运，商贾客旅不能行走，近处的树木和远处村庄处于模糊之中。细雨朦朦中，香零山耸立在烟雨之中，亭亭于江面之上，袅袅娜娜，飘飘渺渺，它忽远忽近，忽高忽低，看不见它的容颜，望不明它的胴体，让人感觉神妙莫测，捉摸不定，它就如传说中的蓬莱、瀛洲、方丈，给人无限遐思和联想。
“湖光秋月两相和，潭面无风镜未磨。 遥望洞庭山水翠，白银盘里一青螺。”而到了天高地净、月明星稀的秋日。潇水河浅了，但更显得澄碧，它犹如一条玉带自香零山向朝阳岩飘然而去，游鱼戏着水面，白鹭在天上低飞。此时香零山如贴水芙蓉，又似青螺悬浮于江面之上，它亭亭玉立，千般俊秀，万般妩媚。如婀娜多姿的南国少女，又似倾国倾城的北方佳人。夜幕降临，夕阳西下，阳光照着油油的江面，泛出粼粼的波光，也照着香零山岛上古色古香、飞檐走壁的庙宇，是那样的惟妙惟俏，美奂美仑。
“湘水流,湘水流,九疑云物至今愁。若问二妃何处所?零陵芳草露中秋”。香零山的得名源于传说山上长有的特殊的香草。据史籍载，西汉元鼎六年（公元前111 年），汉武帝开始建立零陵郡时，景色秀美的香零山盛产一种名贵的香草，形状酷似芳香的罗勒，清香四溢，胜于椒兰。皇帝知道后，便将此草定为贡品。年复一年，贡品数量逐年倍增，香草采尽，仍然不能满足皇宫的需要。清光绪《零陵县志》载 ：“（香零山）地产香草，其叶如罗勒，香闻数十步，唐世上供，郡人苦之，刺史韦宙奏罢之。”有“诗豪”之美誉的唐代文学家刘禹锡对香零山及零陵香草情有独钟，将娥皇、女英的芳魂喻为零陵香草而流芳百世，深情而又满腹相思地写下了《潇湘神》。
又传说，潇水河中有一孽龙，每逢春夏水涨，孽龙就起来兴风作浪，导致船翻人溺，惨不忍睹。为了“镇邪驱妖”，清同治二年，就在香零山岛上修建了一座观音阁，雕塑观音金身，并招幕和尚住在阁中，还设了救生船，雇有专人管理。每逢涨水，白天鸣钟，晚上点灯，使人知警，自此以后，再没船翻人溺事故发生。如今，人们在岛上远眺，层层峻岭群峰美，近看，粼粼玉带潇水清。
“此景只应天上有，人间能得几回见”。香零山，一个潇水河中的秀美的小岛，它是那样令人神往；香零山，一个充满神奇的名山，它是那样让人艳羡称奇。零陵唐高翔