在白米社區有一個傳說...

　　在猴倚山的山上住著一個猴倚仙人，山腳下有一個村落，居民過得非常困苦，於是仙人就在山下放了一個甕，甕裡面會有白米流出來給需要的人，後來有個貪心的年輕人，他為了想得到更多的米，於是就把甕打破了，這讓仙人非常憤怒，就把米都變成了一顆顆白色的石頭，來懲罰這些居民。

　　這時那個年輕人非常後悔，他決定上山去向仙人請罪，但因那座山十分險峻，他決定做一雙利於他爬山，由東晉詩人謝靈運所發明的登山木屐，上山取前掌屐齒，下山取後掌屐齒，跋山涉水的他終於登上了山峰，他對著仙人道歉懺悔，並祈求仙人，賜予他方法讓他能夠改善這個窮鄉僻壤的地方，仙人看到他有如此大的決心與毅力，就提示他：「我雖不願意再給米讓你們不勞而獲，但也不會就此斷了你們的生機，那些白石另有多種用處，你走吧。」於是年輕人下山後用白石在此地設工廠，讓居民的生活從此又得到了改善。