Gram Slot ligt laag in het landschap, omgeven door de Gram Slotssø en dicht bij de Gram Å. Het is hier niet alleen het hoofdgebouw dat de aandacht trekt: de boerderij, de herenstal, het park, het meer en de bijgebouwen vormen samen een landgoedcomplex dat de aankomst in Gram markeert.
Het kasteelpark ten zuiden van de kasteelheuvel is openbaar toegankelijk, dus een bezoek kan prima draaien om een rustige wandeling tussen water, assen en oude parksporen, ook zonder achter de kasteelmuren te hoeven gaan.
Het hoofdgebouw heeft drie vleugels en is opgetrokken in rode baksteen met rode, half afgewolfde daken, witte kroonlijsten en acht gemetselde schoorstenen. De drie vleugels vertellen elk hun eigen deel van de bouwgeschiedenis: de oostvleugel heeft laatgotische kenmerken uit de tijd kort voor 1500, terwijl de zuid- en westvleugel verwijzen naar het barokke landhuisbouw van latere eeuwen.
Dat geeft het kasteel een bijzonder ritme: van een afstand een geheel, maar steeds samengestelder naarmate je langer kijkt naar het metselwerk, de vleugels en de binnenplaatsen.
Gram Slot fungeert vandaag ook als belevingslocatie met rondleidingen, evenementen, restaurant, boerderijwinkel en overnachtingen in gebouwen rond het kasteel. De keuken werkt volgens een van-boer-tot-bord-gedachte en gebruikt producten van eigen velden of van lokale producenten, wanneer dat mogelijk is. Het kasteel zelf is tegelijk een privéwoning, dus toegang tot de binnenruimtes hangt af van de aanbiedingen en evenementen die voor gasten open zijn.