Südöstlich von Reykjahlíð hat sich an der geologischen Verwerfungslinie zwischen der eurasischen und der nordamerikanischen Kontinentalplatte eine breite Felsspalte gebildet. Direkt darunter befindet sich die Höhle Grjótagjá mit kleinem See. Dieser hat herrliche Badewannentemperatur. Sonnenstrahlen, die durch die Felsspalte fallen, tauchen die Höhle in stimmungsvolles Licht. Seit die Badegrotte Drehort von Game of Thrones war, hier wurde die Liebesszene zwischen Jon Snow und Ygritte (Staffel 3) gedreht, steht der Ort stark im Fokus Islandreisender.
Grjótagjá befindet sich auf Privatgrund. Da die zahlreichen Besucher immer wieder Müll in der Grotte zurückließen, ist Baden seit kurzem verboten. Inzwischen ist der Eingang sogar durch ein Gitter versperrt, durch das man aber einen Blick in die Höhle werfen kann. Es gibt Pläne, die Badegrotte wieder öffentlich zugänglich zu machen, dann aber mit Sanitäreinrichtungen und Personal.