以姓氏和地物命名。
村西北原有唐开元年间所建的香峰寺,韦、杨二姓依寺建村。原为两村,各居东西,清光绪十年两村合筑一寨,以韦姓居多,故名韦寺。
明属北吕村保;清属北吕保;1921年属西区韦寺村;1934年属第四区韦寺联保;1941年属繁城镇第十六保;1949年属繁城区;1958年属繁城公社;1961年属繁城区;1965年属繁城公社韦寺大队;1984年属繁城乡韦寺村委会;1987年属繁城回族镇韦寺村民委员会。