千百年来，江郎山流传着一个神奇而又美丽的传说：很久很久以前，金纯山脚江郎乡住着一户勤劳善良的庄户人家——江氏三兄弟。

有一天，天上的美丽仙女须女仙子乘风来到这烟雾飘渺的金纯山上，慧眼望去，只见山脚憨厚、诚实、英俊的三兄弟正在田间劳作，于是她飘然而至来到凡人中间，彼此邂逅，渐生爱慕之情。

无奈仙界人间两重天，须女仙子不能长期待在人间，需要返回天庭，温柔多情的美丽仙女走了，痴情的江郎三兄弟心中无比惆怅，茶饭不思，闷闷不乐，天天站在高山之颠，守望着，一天又一天，盼呀盼呀，一年又一年，等呀等呀，等待着须女仙子的归来。

天长日久，江氏三兄弟化身为三爿巨石耸立在金纯山上。

从此，金纯山改叫江郎山，三爿巨石分别为郎峰、亚峰和灵峰。

此外，另有东海龙君海公主与江氏三郎的爱情传说等。

现代文学巨匠郁达夫就曾写有《江郎“望妻石”》“阿奴生小爱梳妆，屋住兰舟梦亦香；望煞江郎三片石，九姑东去不还乡。”说的也是关于江氏三兄弟的美丽爱情传说。