Erzurum Tortum ilçesine bağlı Bağbaşı Mahallesi’nde (eski adıyla Haho) yer alan bu tarihi yapı, Erzurum ilinin en önemli kültürel miraslarından biridir.

Kilisenin güney girişindeki paye üzerine kazınarak yazılmış kitabesinden, Meryem Ana’ya ithafen 976-1001 yılları arasında Gürcü Bagrat Kralı III. David tarafından inşa edildiği anlaşılmaktadır. Orta Çağ’da önemli bir dini ve eğitim merkezi olan manastırda; 16. yüzyılın ortalarına kadar edebiyat, şiir ve felsefe alanlarında eserler üretildiği, tercümeler yapıldığı bilinmektedir.

Mimari açıdan yapının sahip olduğu yüksek kasnaklı kubbe ve konik külah örtü, binaya hâkim bir görünüm kazandırmıştır. Kubbe, kırmızı ve lacivert sırlı kiremitlerle kaplanmış olup, bu tasarım hem estetik bir etki yaratmış hem de koruma sağlamıştır. Kilisenin duvarlarında arslan, boğa, kartal ve grifon gibi figürlerin kabartmaları dikkat çekerken, iç mekânda freskler bulunmaktadır. Apsis kısmının kule şeklindeki yükseltilmiş yapısı, özgün mimarisiyle görenleri etkilemektedir. 
19. yüzyılda camiye dönüştürülen yapı, günümüzde Bağbaşı Taş Camii olarak bölgenin kültürel zenginliklerinin temsilcisidir.