传说是这样的。

孙悟空被玉皇大帝封官弼马温很不服气，毕竟自己是绝顶聪明、出类拔萃、不可多得的人才，封个芝麻绿豆的小官有点屈才。孙悟空为表达对玉皇大帝的不满，故意放走三匹白马到凡间。

三匹白马来到凡间后就像是脱了缰的野马，到处冲撞祸害百姓。三匹白马祸害百姓都有规律，都是每农历初一和十五，迫害庄稼已经引起民愤，伤害到人命更是不可饶恕。村民上告邕州官府，知州命捕头带领二十多衙役来抓拿三匹恶贯满盈的白马。三匹白马为了躲避追捕钻到一口深洞里，衙役们在捕头带领下搬来一块巨石压住洞口。巨石快要被撞开时衙役们又搬来一块巨石叠起来，两块巨石没能压住洞口，但衙役们已经没力气，有一位壮士单手提起巨石压在两块巨石上才把洞口封死。这三块巨石经过多年的风雨侵蚀，最后成为三叠石奇观。