Under Karl XI:s (1655–1697) tid uppfördes med början år 1680 den så kallade Djurgårdsgärdesgården, ett staket, mer än 2 mil långt som gick runt hela den Kungl. Djurgården för att hålla vilt som hjortar och rådjur inom hägn och varg, björn och tjuvskyttar utanför. Hägnet användes av Kungahuset för att få god tillgång på vilt till köket och lättare kunna ordna lyckade jakter för inbjudna jaktsällskap. Inhägnaden var mer än väl tilltagen för att djuren skulle kunna leva och fortplanta sig på ett naturligt sätt i området. En stor stab av uppsyningsmän, grindvaktare och jägmästare tillsattes för att hålla jaktområdet och stängslet i skick. In på 1700-talet då Karl XI inte längre levde, minskade jaktintresset hos de kungliga.
Efter 1829 slutade man att underhålla stängslet och kvarvarande hjortar, som var det huvudsakliga bytet, flyttades till ett mindre hägn till det område som namngett nuvarande Hjorthagen i området på berget ovanför Ropstensområdet. 1890 flyttades hjortarna till Gripsholm. En av de många grindarna eller portarna in i hägnet var placerad vid Ropsten, där öppningen kallades Ropeport. Huvudvägen från Ropsten in till Stockholm gick utefter stängslet inom hägnet. En annan grind eller port fanns väster om Björnnäset i nuvarande området Fiskartorpet ett stycke från Brunnsviken som man förmodar ligger bakom namnet Grindstängarvägen i Fiskartorpet.
Mellan 1766 och 1862 fick besökare erlägga en avgift för att komma in på området; fordon fick betala avgift fram till 1 oktober 1877. Området inkorporerades med Stockholm 1 januari 1868.