据传说,倭寇侵犯我东海边境时,人们为了避乱,纷纷逃到白马岛上。人们向白马祈祷,渴望白马出来护佑他们。这时,只见一员白袍小将,骑着一匹三条腿的白马,跑在水面上。倭寇的指挥官见状道:“这里海水很浅,连这匹三条腿的马都能在上面跑!”遂命下水上岛,结果淹死不计其数。指挥官一见不妙,只好夹着尾巴跑了。岛上的人得救了,但白袍小将和白马也不见了。
后来,人们在白马岛上的龙王庙里,特塑了一匹白马和一员白袍小将,和龙王爷一样同受人们供奉,还听说,凡是有福气的人才能见到那匹白马或白袍小将。为了祷福,人们都愿向白马岛上多看几眼,希望能见到白马和白袍小将,也希望自己成为洪福齐天的人。