Le château de Chassy est une ancienne maison-forte portant la date de 1056 (année proposée sans référence par M. Gauthier, op.cit.), devenue forteresse médiévale au 14e siècle puis maison résidentielle à partir du 16e siècle. Détaché du village sur une butte « de terre de bois » qui lui ouvre largement la vue à l’ouest, le domaine est délimité par des champs de toute part, sans forêt à proximité. De chaque route par laquelle on arrive sur la commune de Chassy, le château s’offre immédiatement à la vue et est accessible par un chemin privé donnant accès directement à la cour se trouvant devant les communs qui elle même est reliée à la cour du château C’est un beau spécimen, bien conservé et entretenu, de l’architecture de son époque ; Les manoirs de ce type sont rares en Bourgogne sud. On ne trouve que le Sauvement (Ciry-le-Noble), Chatillon et Marigny à Viré. Ils sont plus nombreux en Forez et surtout en Bourbonnais. Intermédiaires entre la simple tour et le château comtal ou baronnial, ils représentent une dimension moyenne que l’abondance anarchique des toits pointus rend très pittoresque. Si on ne peut affirmer que le château actuel correspond exactement à cette « maison » de jadis, en revanche on sait le rôle de gendarmerie (de Gens d’Armes) que Chassy assure au XVè siècle dans le conflit qui oppose les ducs de Bourgogne, dont Charles le Téméraire au Roi de France Louis XI. Le château de Chassy se compose d'un long corps de logis flanqué de deux tours rondes, d'une tour carrée et d'une tour octogonale. Le corps de logis se divise en deux parties distinctes, très visibles par la différence de hauteurs que présentent les façades sud et nord. La tour carrée et la tour octogonale renferment les escaliers donnant accès aux pièces de ces deux parties distinctes. La partie la plus basse est vraisemblablement le bâtiment le plus ancien du château. Ce logis primitif, qui se décompose en deux ou trois pièces suivant les niveaux, présente le plan et les volumes typiques d'une demeure médiévale. Jusqu’au XVIe siècle, l'aspect du château est modifié par différentes campagnes de construction et de travaux autour et sur le corps de logis primitif, ne laissant que très peu de trace du château primitif médiéval. Le deuxième volume du corps de logis, le plus haut, vient s'appuyer contre le logis primitif, mais aucune liaison n'est créée entre ces deux parties, la différence de niveaux de plancher étant trop importante. Ce volume aurait sans doute dû à terme englober dans sa composition générale, le logis primitif comme en témoignent des pierres en attentes sur les façades sud et nord, qui amorcent un nouvel étage pour le logis primitif. La visite est conduite par les propriétaires eux-mêmes et dure environ 1h30 : elle commence par une présentation extérieure de l’historique et de l’architecture du Vieux Château ; elle se poursuit par la visite de deux salles aménagées dans lesquelles seront expliqués aux visiteurs les travaux de restauration en même temps que seront racontés deux thèmes particuliers, savoir : l’art de la table à l’époque médiévale, le rôle de la dame de Chassy ou encore l’émergence de la chevalerie.

En contrebas de la colline sur laquelle s'est développée la forteresse de Semur, cette petite église romane charpentée du XIème siècle, avec son clocher latéral (unique en Brionnais) était la première église de Semur, avant la construction de la collégiale. Elle conserve des peintures murales s'échelonnant du XIIème au XVIème siècle.Visite guidée sur réservation

Cet édifice fût construit entre la fin du XI siècle et début du XIII pour remplacer une église primitive (placée sous le vocable de Saint Jean-Baptiste). L'église se situe dans l'enceinte d'un ancien château, siège d'un domaine agricole et seigneurial ou doyenné ayant appartenu à l'abbaye de Cluny. Au XIX siècle, jugé trop exigüe, elle est délaissée au profit d'une nouvelle église, ouverte au culte en 1870. Revendue, elle sert d'entrepôt de vin et de salle paroissiale avant d'être abandonnée. Elle est sauvée de la ruine et de la destruction par les Amis du Dardon, société savante locale qui acquiert le bâtiment en 1969 et entreprend sa restauration. Des expositions sont organisées en juillet et août.