Jægerspris Slot kendes tilbage fra 1300-tallet, og hed oprindelig Abrahamstrup. Det blev i århundreder brugt som kongeligt jagtslot.
Abrahamstrup var anlagt på de kongelige jorder i Hornsherred. Hvornår den opførtes, er uvist, men fra 1300-tallet er der bevaret skriftlige kilder, hvoraf det fx fremgår, at kong Valdemar Atterdag opholdt sig på borgen i 1360. Middelalderen igennem var borgen et yndet opholdssted for de skiftende regenter, og den blev i perioder overdraget til deres respektive dronninger.
I 1673 solgte Christian 5. slottet til hofjægermester Vincents Hahn, men gav ikke slip på det. I jagtsæsonen skulle kongen have værelser til rådighed, og der skulle være stald og foder til hans heste og en indhegning til jagthundene. Fra 1677 blev stedet kaldt Jægerspris Slot. Slottet blev centrum i et eget landsbysamfund, selv om det lå uden for de nærmeste landsbyer. Hahn ejede stedet i seks år, hvorefter Christian 5. købte slottet tilbage.
Under Frederik 7., der købte slottet i 1854, blev det helårsbolig for ham og grevinde Louise Danner. Kongen fiskede gerne i voldgraven siddende fra et værelse på første sal.
Der er ikke bevaret kilder, der beskriver det oprindelige Abrahamstrup. Man ved dog, at den ældst bevarede bygning blev bygget som én fløj i tre etager over en kælder, og i de følgende par hundrede år blev Jægerspris Slot udvidet. Omkring år 1600 blev der opført en fløj mod syd. Den var i røde munkesten og i én etage, men der var ikke forbindelse til nordfløjen. I 1623 blev der tilføjet et trappetårn på den ældste bygning. Under hofjægermester Hahn blev der opført en ladegård og en række lave bygninger omkring slotsgården.
Frederik 4.s bror prins Carl, der i årene 1703‑29 var ejer, forhøjede sydfløjen med en etage og ændrede tagkonstruktionen fra saddel- til valmtag. Sydfløjens tårn blev forhøjet, og der blev bygget et tilsvarende på fløjens østside, så facaden blev symmetrisk. Sydfløjens port blev muret til, og indkørslen flyttet til slottets vestlige side. Jægerspris var nu et regelmæssigt barokanlæg omkring en midtakse, der gik gennem avlsgård, slot og have.
Under Christian 6. blev østfløjen bygget som forbindelse med de to andre fløje. Kuplen på trappetårnet blev erstattet af et spir. Fra midten af 1700-tallet udvidedes anlægget med tilbygninger på hver side og i to etager. Facaden fremstod nu i dansk barok. Bygningen i midten fik gavlkviste mod både nord og syd, og der blev indsat tre vinduer under en trekantet fronton. Da Frederik 7. købte slottet i 1854, blev facaderne pudset. Indvendigt blev der bl.a. lagt nye gulve, indlagt bad og moderne toiletter.
I 1866 åbnede grevinde Danner en del af Jægerspris Slot for publikum for at fastholde mindet om sin mand, den folkekære Frederik 7., der var død tre år forinden, og i dag er der indrettet museum og mindestuer på slottet.
