Pierwotnie w Świnach około XI wieku wzniesiono drewniany gród obronny. Od XIII do XVIII wieku gród był w posiadaniu rodu von Schweinichen (Świnków). W XIV i XV wieku zbudowano kamienną wieżę otoczoną murem, oraz budynek mieszkalny.
W XVII wieku wzmocniono mury dodając elementy bastionowe. Dobudowano dwuskrzydłową część pałacową, dwie wieże we wschodnim skrzydle oraz bramę wjazdową. Po śmierci ostatniego właściela z rodu Świnków zamek został opuszczony i powoli popadał w ruinę.
Kolejni właściciele nie zdołali zapobiec dalszej dewastacji. W 1876 roku w zamku wybuchł pożar który dokonał ostatecznego zniszczenia wszystkich wnętrz. Od tamtej pory zamek pozostał romantyczną ruiną.
Przebiega tędy zielony Szlak Zamków Piastowskich.