Записки Наталии Урусовой. 1937 Мы очень уважали архимандрита Арсения, тем более, что он был любим митроп. Иосифом и через него мы могли иметь связь с ним. Митрополит жил в то время в Чимкенте. До этого с самого начала ссылки он жил в маленьком городке Аулиэта, ему не разрешено было жить в комнатке, а поместили в сарай со скотиной, отделив его койку жердями.
Вырытая в земле церковь была в квартире архимандрита Арсения. В передней был люк, покрытый ковром. Снималась крышка и под ней лестница в небольшой подвал. Не зная, нельзя было предположить, что под ковром вход в церковь. В подвале в одном углу было отверстие в земле, заваленное камнями. Камни отнимались и, совсем согнувшись, нужно было проползти три шага и там вход в крошечный храм. Много образов и горели лампады. Митрополит Иосиф очень высокого роста, и все же два раза тайно приезжал и проникал в эту церковку. Создавалось совсем особое настроение, но не скрою, что страх быть обнаруженными во время богослужения, особенно в ночное время, трудно было побороть. Когда большая цепная собака поднимала лай во дворе, хотя и глухо, но все же слышно под землей, то все ожидали окрика и стука ГПУ.