המוזיאון של ימינו, בניין ארמון אדיר בן 3 קומות, נבנה בשנים 1753 - 1755 כפרובוקטור של קנונות סנט מרגרטה על ידי האדריכל לודוויג אוסוולד מווילינגן. פסל מרגרט על גבי הגמלון המרכזי של הפרובוסט הוא יצירתו של הפסל יוסף אנטון הופס מווילינגן. הטייח פרנץ אנטון פוגל מפרייבורג יצר את תקרות הטיח.
בין השנים 1815 ו- 1873 שימש הבניין כבית אריגה מכותנה. מאוחר יותר שהפך לבית מלון, ביתו של הפרובוקטור לשעבר ראה אורחים מכובדים כמו קייזר וילהלם הראשון ומשפחתו בשנת 1880. בשנים 1891 עד 1977, בבניין הארמון היו בתי ספר שונים. לאחר שיקום מקיף, מוזיאון אלזטל עם האוסף הנרחב שלו נפתח לציבור בארמון הבארוק בשנת 1985.
