Budowla zwana jest też pałacem Warkoczów, gdyż z inicjatywy tej rodziny w 1796 r. powstaje tutaj późnobarokowy pałac. W 1856 r. zostaje przebudowany przez rodzinę Kosickich (von Koschützki). W latach 30-tych XX w. siedzibę tutaj miał Związek Strzelecki a w czasie II wojny światowej stanowił własność hrabiny Henckel von Donnersmarck. W 1945 r. budynek zamieniono dzięki Armii Czerwonej na szpital przyfrontowy. Obecnie pałac w Rybnej prowadzi działalność gastronomiczno-hotelarską,włącznie z organizacją przyjęć okolicznościowych, w tym wesel, bankietów firmowych oraz eventów biznesowych. Oprócz tego prowadzi działalność kulturalną, w szczególności organizując koncerty muzyki klasycznej oraz wystawy i spotkania z twórcami.
W 1829 r. pałac odziedziczyła rodzina Chrząszczewskich. W roku 1856 pałac przechodzi w ręce rodziny von Kosickich, budowla zostaje przebudowana, dodano ganek z balkonem, wnętrza zostały wzbogacone o neorenesansową stolarkę i obramienia okien. Pałac jest wybudowany w stylu późnobarokowym i otoczony parkiem. W latach 1983-1991 w pałacu siedzibę ma Dom Pracy Twórczej Stowarzyszenia Polskich Artystów Muzyków.