Эксперты ИКИ РАН изучили возможности восстановления облика поврежденных фресок при помощи нейросетей.

👥 Сотрудники Института космических исследований РАН (ИКИ РАН) и Кирилло-Белозерского музея-заповедника исследуют возможности нейронных сетей для восстановления первоначального облика поврежденных произведения искусства.

🖼 Например, на фресках собора Рождества Богородицы Ферапонтова монастыря, дошедших до нашего времени почти в полном составе и подлинном виде с начала XVI века, есть некоторые потери.

🗺 Реставраторы, восстанавливающие утерянные изображения из мелких фрагментов и на основе общей карты, тратят немало усилий, чтобы попытаться представить, каким мог быть первоначальный облик.

🤖 Для проверки возможностей нейросетей, которые могут значительно ускорить процесс реставрации поврежденных фресок, использовалась нейросеть Stable Diffusion. Это глубокая модель машинного обучения, которая способна создавать изображения на основе текстовых описаний.

📷 Нейросеть была обучена на коллекции фотографий, полученных в ходе мультиспектральной съемки росписей собора.

✅️ Нейросеть в целом хорошо справляется с «ретушированием» не только малых, но и значительных потерь. Ей удалось восстановить не только фоновый цвет и повторяющиеся узоры, что вполне естественно, но и фрагменты фигур святых, направление взгляда и положение рук.

📈 Есть и «ошибки», которые можно исправить, продолжая «обучать» нейронную сеть на специально подобранных изображениях фресок и частей фресок. Эта работа сейчас продолжается.

@digitalbuild

#нейросети
#искусственныйинтеллект
#реставрация