Byantikvaren vil stoppa oppgraderinga av bygget