Сам процесс сканирования выглядит как на первом скриншоте. Нейросеть автоматически распознает окна, проемы, двери, холодильник, в целом домашнюю утварь. После этого уже по их тегам, которые также сохраняются в модель, можно заменять их на более детализированные модели.
Но поскольку я для всех целей использую Half-Life: Alyx, то каждую из стен вручную нужно обводить и искать в картотеки нужную модель.

Добавил немного освещения и окружения и сцена стала похоже больше на правду.

Теперь осталось придумать, что тут мне нужно сделать, куда идти.
Пока есть идея, что к тебе врываются с ПОВЕСТКОЙ солдаты и их нужно успешно перестрелять.

С первой локацией мы уже поняли, что там будут врывающиеся отряды Комбайнов, то вот со второй, это будет Тбилисское кафе Shavi.

Я по итогу объединил обе эти локации в одну, добавил горы, противников и оружие. Осталось придумать как закончится уровень.