A török idők alatt a veszprémvölgyi apácák elmenekültek. Birtokaikat, így Vörösberényt is a jezsuiták győri kollégiuma kapta meg 1626-ban. Ők építették fel 1750 körül a templom mellett álló egykori kolostort és a sekrestyéből álló Szent Sír kápolnát. A volt kolostor már 1758-ban a győri jezsuiták “berényi kastélyaként” létezett.

menü