Nadali mu formę czworoboku z renesansowym arkadowym dziedzińcem. Prowadziła do niego brama umieszczona w jednym z narożników, ozdobiona herbem rodu Sedlickich. Do bramy prowadził most przewieszony nad fosą okalającą zewnętrzne mury. Z drugiej strony dwór chroniony był przez rozległe stawy.
Po Czelach w połowie XVII w. Wieś z dworem nabyła szlachecka rodzina Pełków z Nowego Miasta, zaś po nich od 1837 do 1945 r. właścicielami byli członkowie rodziny Folwarcznych.
Z dawnego założenia zachowały się dwa skrzydła dworu, trzecie stanowi zbudowana w 1960 r. sala widowiskowo-kinowa. Starannie odremontowany w 1995 r. jest siedzibą Izby Regionalnej, biblioteki, hotelu i restauracji oraz miejscem wielu kulturalnych wydarzeń.
Obiekt bywa nazywany "Cieszyńskim Wawelem".
Skrytka została umieszczona za wiedzą i zgodą właścicieli.