Die aus einem slawischen Markt- und Burgflecken entstandene Stadt Hologast wird 1123 erstmals urkundlich erwähnt, als der Herzog Wartislaw I. von Pommern die Stadt erobert. Das Stadtrecht erhielt Wolgast 1257. Von 1295 bis 1464 und von 1532 bis 1625 war die Stadt Residenz der pommerschen Herzöge. Wolgast war auch Mitglied der Hanse, spielte aber eine eher unbedeutende Rolle. Als ein Zeichen der Macht der Feudalherren galt das um 1300 erbaute Schloss, von dem heute aber jede Spur fehlt.

Wolgast war von einer ungewöhnlich hohen Stadtmauer umgeben, von der Teile heute noch vorhanden sind. Durch das Bauwieker-, das Basteyen- und das Wassertor hatte man Zugang zur Stadt. Auf dem Kupferstich von Merian wird besonders der schwedische Einfluss deutlich. Das Schloss ist von einer starken Bastion umgeben, die typisch für schwedische Festungsbauten ist. Die Zerstörung des Schlosses begann im 30jährigen Krieg, als die gegen Wallenstein kämpfenden Dänen die Stadt eroberten.
Im Jahre 1675 wurde bei der Belagerung durch den Kurfürsten Friedrich Wilhelm von Brandenburg das Schloss erheblich beschädigt. Die schwedische Regierung verkaufte 1798 das Schloss letztlich als Steinbruch. Von den alten Bauten der Stadt Wolgast sind heute kaum noch welche vorhanden. Vor allem Brände und Kriege sorgten dafür, daß vieles nicht mehr erhalten ist.