Sem kirke ble først bygget i tre i starten av 1100-tallet. Kirken brant ned i 1682, og ble så bygget opp igjen slik vi ser den i dag, i stein. I 1999 ble det feiret 900-års jubileum av kirken etter at det ble det gjort oppussing. Resultatet av dette er dagens utseende.
Det finnes rundt 300 sitteplasser i Sem kirke.