Kümbet Camisi, Kars Kalesi'nin güney eteğinde ve Evliya Camisi’nin kuzeyinde yer alır. MS 932-937 yılları arasında Bagratlı Krallığı döneminde yapılmış bir kilisesi olup 1064 yılında Selçukluların Kars’ı fethetmesiyle birlikte camiye dönüştürülmüştür. Havariler Kilisesi veya On İki Havariler Kilisesi olarak da bilinir.