Sredi naselbine Ribnica postavljeni grad je bil eden redkih nižinskih oziroma vodnih gradov v Sloveniji. Nastal je za grofe Ortenburške v drugi polovici 13. stoletja oziroma pred letom 1263. Pred 15. stoletjem so prvotno stavbno zasnovo razširili in ji dodali še drugo bivalno poslopje. Najpozneje v prvi polovici 16. stoletja so grad obdali z razsežnim protiturškim obzidjem, ki je imelo tudi funkcijo protiturškega tabora za ribniške tržane. V 17., 18. in 19. stoletju je bil grad deležen več gradbenih posegov in z njimi se je iz utrdbe spremenil v udobno rezidenco vplivnega novoveškega plemstva. Stavbni kompleks so dopolnili z razsežnim dislociranim vrtom, ki so ga poudarili s kakovostno zasnovanim paviljonom. Med drugo svetovno vojno in v prvih letih po njej so večji del gradu podrli do tal. Ostanke so med letoma 1958 in 1961 prenovili po načrtih arhitekta Cirila Tavčarja.