Folkenborg museum ligger på et sted som har vært et knutepunkt i lokalmiljøet i uminnelige tider. Allerede på 1100-tallet var det kirke og prestegård her, og i 1204 fødte Inga fra Varteig kongssønnen Håkon Håkonsson på gården. Helt frem til 1900 var dette det administrative sentrum for folk i området.