Het gemeentemuseum van Huy is gevestigd in het oude klooster van de minderbroeders aan de rand van de benedenstad, op korte loopafstand van de Maas. De franciscanen waren al in 1225 in Huy aanwezig en kregen in 1234 grond om een klooster te stichten. De kloosterkerk werd vanaf 1244 opgebouwd. Het gebouwencomplex dat je vandaag ziet, is grotendeels het resultaat van herbouw en uitbreiding in de 17e eeuw, uitgevoerd in de Maaslandse stijl. Het klooster en de kloostergang vormen nog altijd de kern van het bezoek, met een binnenhof en arcades die het geheel een rustige, gesloten structuur geven.
Aan de buitenzijde valt het monumentale toegangsportaal op, dat in 1658 werd gebouwd. In de kloostergang zijn bouwdata zichtbaar die bij de herbouw horen, met jaartallen uit 1664, 1669 en 1684. Voor de ingang werd in 1705 een portiek met zuilen geplaatst. Het gebouw is een beschermd monument en werd in verschillende fasen gerestaureerd, waaronder een recente restauratie van het portaal.