I Rødeboken (ca. 1398) hører vi at Roar på Hesby har skjenket Sem kirke 1 laups land i Holt og til gjengjeld fått 3 laups land i Skjerpe på Nøtterøy.
Ingen av Holtegårdene er oppført i skattelistene omkring år 1600; Søndre Holt var nemlig krongods, Mellom Holt kirkegods og Nordre Holt enten underbruk eller har hatt en fattig oppsitter.
''Oldtidsminner''. På Holt er funnet to skafthulløkser av stein, den ene fra steinalderen, den annen antagelig fra bronsealderen. I et brev av 23/11 1883 til Oldsaksamlingen meddelte Lars J. Hansen Holt at det på hans eiendom da fantes flere store hauger, som kunne antas å være gravhauger. Ved befaringen i 1932 kunne det imidlertid ikke påvises gravhauger på gården.