Bayburt il merkezine 10 km uzaklıktaki Uğrak köyüne eskiden bir kent olduğu bilinmektedir. Çünkü köy çevresinde bulunan birçok yıkıntı buradaki eski bir kentten kalan kalıntılar olduğunu anlatıyor.

Bu kalıntılar X.ve XIII. yy ait olduğu söylenmektedir.Uğrak köyündeki en yüksek tepede bulunan üç kilise kalıntısı XII.yy kilise mimarisinin özelliklerini taşımaktadır.