传说韩愈能生活自给以后，就将大哥的遗孤韩湘接到身边与自己同住，并教导他认真读书。但是，韩湘对读书进仕不感兴趣，却对访仙修道执迷不悟，韩愈对此非常痛心。有一次，韩愈在寻找外出访仙的韩湘时，有感而发写了一首诗。诗中说道：“两家各生子，孩提巧相如。少长聚嬉戏，不殊同队鱼。年至十二三，头角稍相疏。二十渐乖张，清沟映河渠。三十骨骼成，乃一龙一猪。一为公与相，潭潭府中居；一为马前卒，鞭背生虫蛆。问之何因尔？学与不学欤！”希望侄子能有觉悟。
谁知韩湘回家见到诗后，也写了一首诗来言志。诗中说：“解造逡巡酒，能开顷刻花。有人能学我，同共看仙葩。”韩愈不相信侄子，一会能酿成美酒，一眨眼使树开花。韩湘遂撮土一盆，一会儿说：“花已开矣。”拿开盆只见碧花两朵。叶间有两行小字，是一诗联：“云横九岭家何在，雪拥蓝关马不前。”韩愈对侄子的本领大为惊异，只好听任韩湘离开自己，云游天下去了。据说后来不久，韩湘就得道成仙，位列八仙，就是韩湘子。