Rejon obecnej ulicy Zamkowej w Kłodzku to dawna wieś Goszyce, o której pierwsze wzmianki pochodzą z 1337 roku. Około 1711 roku powstała tam okazała barokowa rezydencja z II - kondygnacyjnym pałacem o bogato dekorowanych elewacjach i narożnymi wieżami. Budowlę poprzedzał reprezentacyjny dziedziniec i ozdobny ogród w stylu francuskim.
25 czerwca 1807 roku pałac w Goszycach stał się miejscem podpisania aktu kapitulacji przez pruskiego komendanta Twierdzy Kłodzkiej wobec oblegających ją Francuzów.
Około 1950 roku planowano otworzyć w gmachu pałacu Muzeum Ziemi Kłodzkiej. Zbierano pieniądze na ten cel organizując loterię fantową. Niestety stan techniczny budynku i panująca tam wilgoć uniemożliwiły realizację tego przedsięwzięcia.
Pałac spłonął całkowicie w czerwcu 1971 roku. Przypuszcza się, że budynek podpalono celowo, by uniknąć opłat związanych z konserwacją pałacu. Ocalałe fragmenty kamieniarki zostały wymontowane i zabezpieczone oraz przekazane do Muzeum Ziemi Kłodzkiej.
Teraz w miejscu zamku stoi zakład samochodowy...