Barokní novostavba koleje vznikala v několika etapách v 17. a 18. století. Podíleli se na ní František Xaver, Martin Reiner, Carlo Lurago, nebo Pavel Ignác Bayer.