因村民委员会驻吕集,故名。
于姓早居建村。因有集市始名于集;后因于姓迁走,吕姓居多,改名吕集。
清属申安保;1921年属西区申安张村;1934年属第四区张牛王庙联保;1941年属繁城镇第六保;1949年属繁城区;1958年属杜曲公社徐大王庙管理区;1961年属杜曲区;1965年属杜曲公社,为吕集大队;1984年属杜曲乡为吕集村委会。1995年7月16日属杜曲镇。