所轄范圍于明清期間已有自然村落形成。

嘉慶九年（1804年）屬天門縣云潭鄉(xiāng)宵城里文墩北團。

道光元年（1821年）屬云潭村三里文墩北團。

民國35年（1946年）為四區(qū)。

民國36年（1947年）6月屬皂市區(qū)平等鄉(xiāng)。

1949年6月由解放區(qū)京應(yīng)縣皂市區(qū)劃歸天門縣。

1951年屬李場鄉(xiāng)。

1955年屬九真區(qū)李場鄉(xiāng)。

1958年人民公社化時屬九真人民公社和平大隊。

1961年恢復區(qū)鎮(zhèn)建制，屬九真區(qū)李場公社。

1975年1月撤區(qū)并社，屬李場公社。

1981年恢復原地名為白土山。

1984年設(shè)區(qū)建鄉(xiāng)屬李場區(qū)文墩鄉(xiāng)，原名稱白土山大隊變更為白土山村。

1987年區(qū)鄉(xiāng)體制改革后屬李場鎮(zhèn)。

2001年與皂市鎮(zhèn)合并為皂市鎮(zhèn)白土山村村民委員會至今。