Pierwsze założenie dworskie zostało wzniesione około roku 1760. Dobra ziemskie w tym czasie były w posiadaniu rodów polskich min. rodziny Przetockich. W okresie porozbiorowym miejscu znalazła się na obszarze niegdysiejszych Prus. Na początku XX wieku dwór powiększono o skrzydło pałacowe północno-zachodnie z obszerną salą balową i zabudowanym tarasem. Część dworska, jednokondygnacyjna jest częściowo podpiwniczona i nakryta dachem pulpitowanym z nadstawkami. Na tyłach dworu rozciąga się założenie parkowe ze stawem oraz licznym starodrzewem w tym z okazami pomnikowymi. W okresie powojennym w obiekcie była zlokalizowana siedziba PGR Goraj. Od lat dziewiędziesiątych XX wieku obiekt systematycznie uległ dewastacji i popadł w ruinę. W roku 2008 pałac trafił w ręce nowych właścicieli i od tego czasu rozpoczęła się kompleksowa rewitalizacja zabytkowego obiektu wraz z odbudową założeń parkowych. W chwili obecnej ku końcowi zmierza remont połaci dachowej wraz z wymianą pokrycia ceramicznego. Z chwilą zakończenia prac renowacyjnych pałac stanie się niewątpliwą wizytówką Przytocznej i atrakcyjną turystyczną okolic.