Для интересующихся горизонтами BIM. Немного вовлечён в исследовательский проект профессора Рафаэля Сакса, где его группа скрещивают BIM c Digital Twin (цифровым двойником) для планирования строительства.
Завтра, 8 апреля, в 11:00 по CET пройдет очередной вебинар про использование цифровых двойников при планирование производства и строительства. Как моделировать и прогнозировать результаты альтернативных производственных планов для строительных проектов, что является шагом на пути к автономному планированию и контролю при помощи цифровых двойников.
Регистрация тут (в конце страницы).
Там же найдете записи предыдущих вебинаров проекта BIM2TWIN цель которого как раз объединить BIM c Digital Twin в единой платформе.
Завтра, 8 апреля, в 11:00 по CET пройдет очередной вебинар про использование цифровых двойников при планирование производства и строительства. Как моделировать и прогнозировать результаты альтернативных производственных планов для строительных проектов, что является шагом на пути к автономному планированию и контролю при помощи цифровых двойников.
Регистрация тут (в конце страницы).
Там же найдете записи предыдущих вебинаров проекта BIM2TWIN цель которого как раз объединить BIM c Digital Twin в единой платформе.
BIM2TWIN
Webinars
Webinars
The goal of the BIM2TWIN is to reduce all kinds of operational waste, schedule shortenings, cost reductions, quality, safety improvement, and carbon footprint reduction. BIM2TWIN is an EU innovation project that creates a Digital Building Twin…
The goal of the BIM2TWIN is to reduce all kinds of operational waste, schedule shortenings, cost reductions, quality, safety improvement, and carbon footprint reduction. BIM2TWIN is an EU innovation project that creates a Digital Building Twin…
PlayCanvas Super Splat, бесплатный онлайн-редактор для работы с гауссовыми пятнами (gaussian splatting), использующий PLY-файлы. Недавно выпустил новое обновление с функциями с лучшей производительностью и функцией позволяющей выбирать края (кольца) пятна вместо центра, что обеспечивает более точный контроль при редактировании.
Пробовать по ссылке
Пробовать по ссылке
Media is too big
VIEW IN TELEGRAM
PhysDreamer — любопытный проект по созданию реалистичных взаимодействий с виртуальными объектами, что важно при создание опыта погружения в виртуальной среде.
PhysDreamer анализирует видеоролики, в которых объекты с разными материалами взаимодействуют друг с другом. Из видео извлекается информацию о физических свойствах объектов, таких как жесткость, эластичность и трение. На основе извлеченной информации создаются модели поведения, которые предсказывают, как объекты будут двигаться в ответ на различные силы и манипуляции. Далее генерируется реалистичная анимация взаимодействия объектов в виртуальной среде.
Для реконструкции статический объекта используется 3D-гауссианы, для физического взаимодействия извлекается «поле физического материала» (physical material field), а 3D-динамика моделируется с использованием дифференцируемого метода материальных точек (MPM).
Страница проекта
PhysDreamer анализирует видеоролики, в которых объекты с разными материалами взаимодействуют друг с другом. Из видео извлекается информацию о физических свойствах объектов, таких как жесткость, эластичность и трение. На основе извлеченной информации создаются модели поведения, которые предсказывают, как объекты будут двигаться в ответ на различные силы и манипуляции. Далее генерируется реалистичная анимация взаимодействия объектов в виртуальной среде.
Для реконструкции статический объекта используется 3D-гауссианы, для физического взаимодействия извлекается «поле физического материала» (physical material field), а 3D-динамика моделируется с использованием дифференцируемого метода материальных точек (MPM).
Страница проекта
This media is not supported in your browser
VIEW IN TELEGRAM
3D моделирование по-новому. 1/2
Кажется мы всё ближе к появлению нового типа 3D моделирования. Мне нравится наблюдать, за тем, как в поисках решения прикладной задачи рождается новый способ создания чего-то, что меняет индустрию. Так случилось с генерацией изображения из текста. Одна из основных фишек её стала функция врисовывания объекта или перерисовывания имеющегося. В Stable Diffusion это работает с ControlNet. Недавно наткнулся на SigNeRF, который делает тоже, но в 3D. При этом он использует тот же ControlNet, но уже для работы с NeRF сценами.
Подход элегантен. У вас есть сцена, восстановленная с помощью NeRF, а чтобы вставить или перерисовать 3D объект в ней, вы смотрите на этот объект с множество точек. Далее перерисовываете каждый кадр с помощью ControlNet через карту глубины используя текстовый запрос. Разработчиком удалось добиться хорошей консистентности, т.е. единообразие сгенерированных изображений, так что NeRF может обновить сцену. В видео и на странице проекта это хорошо показано.
Кажется мы всё ближе к появлению нового типа 3D моделирования. Мне нравится наблюдать, за тем, как в поисках решения прикладной задачи рождается новый способ создания чего-то, что меняет индустрию. Так случилось с генерацией изображения из текста. Одна из основных фишек её стала функция врисовывания объекта или перерисовывания имеющегося. В Stable Diffusion это работает с ControlNet. Недавно наткнулся на SigNeRF, который делает тоже, но в 3D. При этом он использует тот же ControlNet, но уже для работы с NeRF сценами.
Подход элегантен. У вас есть сцена, восстановленная с помощью NeRF, а чтобы вставить или перерисовать 3D объект в ней, вы смотрите на этот объект с множество точек. Далее перерисовываете каждый кадр с помощью ControlNet через карту глубины используя текстовый запрос. Разработчиком удалось добиться хорошей консистентности, т.е. единообразие сгенерированных изображений, так что NeRF может обновить сцену. В видео и на странице проекта это хорошо показано.
2/2
Но в этом мне нравится именно будущая возможность представлять новые типы 3D софта на основе NeRF репрезентации, вместо набивших оскомину полигональных сеток и на худой конце NURBS. В этом интерфейсе вы добавляете объекты выделив рамкой место и описав ваш текст, меняете стили уже добавленных объектов, меняете его структуру и материал, не моделируя каждый отдельный элемент, а все текстом, или референсным изображением или объёмной моделью. С помощью 3D болванок создаёте массы, но каждая болванка обладает описанием, которая сразу его преобразует во что-то детализированное и согласовывает с другими объектами. В общем, кажется это уже не совсем фантазии, а всё больше будущая реальность. Как говорится «запомните этот твит»
Но в этом мне нравится именно будущая возможность представлять новые типы 3D софта на основе NeRF репрезентации, вместо набивших оскомину полигональных сеток и на худой конце NURBS. В этом интерфейсе вы добавляете объекты выделив рамкой место и описав ваш текст, меняете стили уже добавленных объектов, меняете его структуру и материал, не моделируя каждый отдельный элемент, а все текстом, или референсным изображением или объёмной моделью. С помощью 3D болванок создаёте массы, но каждая болванка обладает описанием, которая сразу его преобразует во что-то детализированное и согласовывает с другими объектами. В общем, кажется это уже не совсем фантазии, а всё больше будущая реальность. Как говорится «запомните этот твит»
Симуляция Акустики 1/5
Столкнулся с необходимостью автоматизировать симуляцию акустики. Это для исследовательского проекта SONATA, где надо научиться оркестровать динамическим компонентами офисного пространства, адаптируя его к запросам и профилям пользователей. Для этого нужно осведомлённость о ситуации (situation awareness), в том числе об акустике. Например, как будет меняться акустический профиль за рабочим местом если роботизированная перегородка переместилась и изменилось положение акустических панелей.
Последний раз прикладную акустическую задачу решал, кажется, ещё в институте, так что стал разбираться что есть сейчас и какие есть особенности. Далее расскажу, что протестировал.
Первым симуляторов акустики стал I-Simpa. Его подсказал консультант по акустике, как бесплатную замену довольно дорогому индустриальному стандарту Odeon.
Столкнулся с необходимостью автоматизировать симуляцию акустики. Это для исследовательского проекта SONATA, где надо научиться оркестровать динамическим компонентами офисного пространства, адаптируя его к запросам и профилям пользователей. Для этого нужно осведомлённость о ситуации (situation awareness), в том числе об акустике. Например, как будет меняться акустический профиль за рабочим местом если роботизированная перегородка переместилась и изменилось положение акустических панелей.
Последний раз прикладную акустическую задачу решал, кажется, ещё в институте, так что стал разбираться что есть сейчас и какие есть особенности. Далее расскажу, что протестировал.
Первым симуляторов акустики стал I-Simpa. Его подсказал консультант по акустике, как бесплатную замену довольно дорогому индустриальному стандарту Odeon.
Симуляция Акустики: I-Simpa 2/5
Не новый, но бесплатный и простой софт с хорошей инструкцией. По словам разработчиков это не полноценный софт, а оболочка для двух расчетных моделей. Первая основана на классической теории реверберации, вторая, более продвинутая по возможностям, основана на трассировке частиц. Второй подход используется во всех современных симуляторах.
Для симуляции нужно преобразовать модель интерьера в замкнутый объем. Назначить материалы. Под материалами подразумевается свойства поглощения и отражения акустической волны с разной частотой. Далее расставить источники звука и приемники. Приемники могут быть точечные, аля микрофон, и поверхностные (плоскость).
На выходе для каждого приемника рассчитывается серия акустических параметров, в виде таблиц и графиков. Например, для уровня звука будет распределение по частотному спектру и тому как звук затухает во времени. А поверхностный приемник покажет красивый градиент ещё и с анимацией. Останется только понять, как это всё интерпретировать.
Не новый, но бесплатный и простой софт с хорошей инструкцией. По словам разработчиков это не полноценный софт, а оболочка для двух расчетных моделей. Первая основана на классической теории реверберации, вторая, более продвинутая по возможностям, основана на трассировке частиц. Второй подход используется во всех современных симуляторах.
Для симуляции нужно преобразовать модель интерьера в замкнутый объем. Назначить материалы. Под материалами подразумевается свойства поглощения и отражения акустической волны с разной частотой. Далее расставить источники звука и приемники. Приемники могут быть точечные, аля микрофон, и поверхностные (плоскость).
На выходе для каждого приемника рассчитывается серия акустических параметров, в виде таблиц и графиков. Например, для уровня звука будет распределение по частотному спектру и тому как звук затухает во времени. А поверхностный приемник покажет красивый градиент ещё и с анимацией. Останется только понять, как это всё интерпретировать.
Симуляция Акустики: Pachyderm 3/5
Это плагин к Rhino/Grasshopper, бесплатный и параметрический by-design. Часть инструментов доступны через командную строку в Rhino, а большая часть в Grasshopper. И кажется вот он ответ на задачу автоматизации процесса для симуляции тысяч ситуаций.
Но оказалось, во-первых, у него очень слабая документация, есть обучающие видео, но их мало и не покрывают многого. Во-вторых, нет библиотек материалов с акустическими свойствами, и я думаю можно перенести их из открытой библиотеки Odeon, но это не ясный процесс. В-третьих, и главное, он не полностью совместим с Rhino 8, и часть важных модулей, в частности модуль привязки материалов, просто не открывается, а даже если ставить Rhino 7 под которую последняя версия, то все равно он не открывается. Хотя часть симуляций рейтрейсинга без физических свойств с ним заработало.
Заключая, Pachyderm оказался гипотетически потенциальным, а практически не работающим инструментом, по крайне мере до официальной поддержки Rhino 8. Ищем дальше…
Это плагин к Rhino/Grasshopper, бесплатный и параметрический by-design. Часть инструментов доступны через командную строку в Rhino, а большая часть в Grasshopper. И кажется вот он ответ на задачу автоматизации процесса для симуляции тысяч ситуаций.
Но оказалось, во-первых, у него очень слабая документация, есть обучающие видео, но их мало и не покрывают многого. Во-вторых, нет библиотек материалов с акустическими свойствами, и я думаю можно перенести их из открытой библиотеки Odeon, но это не ясный процесс. В-третьих, и главное, он не полностью совместим с Rhino 8, и часть важных модулей, в частности модуль привязки материалов, просто не открывается, а даже если ставить Rhino 7 под которую последняя версия, то все равно он не открывается. Хотя часть симуляций рейтрейсинга без физических свойств с ним заработало.
Заключая, Pachyderm оказался гипотетически потенциальным, а практически не работающим инструментом, по крайне мере до официальной поддержки Rhino 8. Ищем дальше…
Симуляция Акустики: Treble 4/5
Это web-сервис с помесячной подпиской и пробным месяцем. Мне он показался самым интересным из описанных. У Treble отличная документация и интерфейс. С точки зрения логики симуляции здесь все обычно. Загружаешь модель. Назначаешь материалы из довольно обширной библиотеки (это тоже большой плюс). Расставляешь источники звука и приёмники, которые могут быть точечный и поверхностные.
Далее симуляция, что довольно быстро так как считается в облаке. На выходе много метрик, и в отличие от I-Simpa, есть не только технические, но и более интерпретируемые метрики такие как измерение чёткости речи (C50), музыки (C80) и индекс передачи речи (STI). Отличная особенность это возможность сравнивать на графиках распределения метрик по нескольким приемникам и даже данные с разных экспериментов, например где меняются источники звука. Это делает анализ аналитически осмысленным, сам всегда продвигал возможности сравнения как основополагающий принцип аналитического интерфейса. И это не всё…
Это web-сервис с помесячной подпиской и пробным месяцем. Мне он показался самым интересным из описанных. У Treble отличная документация и интерфейс. С точки зрения логики симуляции здесь все обычно. Загружаешь модель. Назначаешь материалы из довольно обширной библиотеки (это тоже большой плюс). Расставляешь источники звука и приёмники, которые могут быть точечный и поверхностные.
Далее симуляция, что довольно быстро так как считается в облаке. На выходе много метрик, и в отличие от I-Simpa, есть не только технические, но и более интерпретируемые метрики такие как измерение чёткости речи (C50), музыки (C80) и индекс передачи речи (STI). Отличная особенность это возможность сравнивать на графиках распределения метрик по нескольким приемникам и даже данные с разных экспериментов, например где меняются источники звука. Это делает анализ аналитически осмысленным, сам всегда продвигал возможности сравнения как основополагающий принцип аналитического интерфейса. И это не всё…
This media is not supported in your browser
VIEW IN TELEGRAM
Симуляция Акустики: Treble 5/5
В Treble есть очень классный модуль, который называется Auralizer позволяющий услышать то, как будет восприниматься звук с мест ваших приёмников. И это прям очень клевый пример перцептивного подхода к анализу данных, в данном случае симуляции акустики помещения. Для этого вы выбираете трек из библиотеки записей или подгружаете свой и далее переключаетесь между приемниками, чтобы услышать, как будет на слух восприниматься этот трек. Здесь приведен пример как это работает. Для непосредственно нашего исследования это не очень актуально (хотя посмотрим), но я очень хорошо вижу, как такой инструмент входит в обязательную программу при проектировании, когда дизайнер помещения может ощутить, как его дизайн звучит.
Так же у Treble есть SDK, который позволяет на Питоне организовывать проекты с загрузкой геометрии, симуляцией и т.д. что как раз ключ к автоматизации. Но в этом я ещё не разбирался.
На этом пока всё с обзором симуляторов акустики помещения.
В Treble есть очень классный модуль, который называется Auralizer позволяющий услышать то, как будет восприниматься звук с мест ваших приёмников. И это прям очень клевый пример перцептивного подхода к анализу данных, в данном случае симуляции акустики помещения. Для этого вы выбираете трек из библиотеки записей или подгружаете свой и далее переключаетесь между приемниками, чтобы услышать, как будет на слух восприниматься этот трек. Здесь приведен пример как это работает. Для непосредственно нашего исследования это не очень актуально (хотя посмотрим), но я очень хорошо вижу, как такой инструмент входит в обязательную программу при проектировании, когда дизайнер помещения может ощутить, как его дизайн звучит.
Так же у Treble есть SDK, который позволяет на Питоне организовывать проекты с загрузкой геометрии, симуляцией и т.д. что как раз ключ к автоматизации. Но в этом я ещё не разбирался.
На этом пока всё с обзором симуляторов акустики помещения.
Field-to-Field
Какой шрифт нравится больше?
Итак, названия шрифтов:
1. Poppins
2. Inter
3. Roboto
По результатам первые два шрифта делят лидерство, оставив Roboto в аутсайдерах. Несмотря на то, что Roboto разрабатывался как универсальный шрифт, но видимо он слишком прост и проиграл более выразительным Inter и Poppins. Они в большей степени подходят для заголовков и подписей, но там, где вам не надо экономить место на текстовые блоки, они отлично работают и с основным текстом.
1. Poppins
2. Inter
3. Roboto
По результатам первые два шрифта делят лидерство, оставив Roboto в аутсайдерах. Несмотря на то, что Roboto разрабатывался как универсальный шрифт, но видимо он слишком прост и проиграл более выразительным Inter и Poppins. Они в большей степени подходят для заголовков и подписей, но там, где вам не надо экономить место на текстовые блоки, они отлично работают и с основным текстом.
Media is too big
VIEW IN TELEGRAM
GPT-4o
Вчера вышел GPT-4o от OpenAI. “o” – это “omni” т.е. всесторонний, и это правда. В отличие от прошлых версий, где за отдельный функционал отвечали связки разных нейросетевых моделей в GPT-4o одной моделью, решает одновременно задачи распознавания речи и изображения, генерации текста, её озвучку и генерации изображения внутри одной модели. Это позволило добиться невероятного уровня эмоциональности, естественности в общение и консистентного восприятия-ответе.
Более естественным становится процесс генерации изображения, примеры есть на странице GPT-4o. Во-первых, изображение может генерировать тексты внутри изображения так как вы его даёте. Во-вторых, вы можете просить делать правки что создаёт процесс последовательно редактируемым.
А ещё обещают, что новая версия будет и в бесплатном пользование, хотя у меня пока не доступно.
Выглядит это как очень мощный шаг вперед на пути к сильному искусственному интеллекту покрывая сенсорное восприятия с трех модальностей: текст, изображение и звук.
Вчера вышел GPT-4o от OpenAI. “o” – это “omni” т.е. всесторонний, и это правда. В отличие от прошлых версий, где за отдельный функционал отвечали связки разных нейросетевых моделей в GPT-4o одной моделью, решает одновременно задачи распознавания речи и изображения, генерации текста, её озвучку и генерации изображения внутри одной модели. Это позволило добиться невероятного уровня эмоциональности, естественности в общение и консистентного восприятия-ответе.
Более естественным становится процесс генерации изображения, примеры есть на странице GPT-4o. Во-первых, изображение может генерировать тексты внутри изображения так как вы его даёте. Во-вторых, вы можете просить делать правки что создаёт процесс последовательно редактируемым.
А ещё обещают, что новая версия будет и в бесплатном пользование, хотя у меня пока не доступно.
Выглядит это как очень мощный шаг вперед на пути к сильному искусственному интеллекту покрывая сенсорное восприятия с трех модальностей: текст, изображение и звук.
Портал в «нетуда» 1/3
Городское гибридное пространство для социальных взаимоотношений скорее реальное или виртуальное?
За свою карьеру я несколько раз участвовал в проектах создания меж-пространственных городских медиа порталов. Они по разным обстоятельствах не были реализованы, но каждый раз я это предлагал со светлыми помыслами. Технологически это уже совсем не сложно: экран и камера в одном публичном месте, и тот же набор в другом. Ну сами посудите, как круто создать в городе портал в другой город, новое пространство меж-городской коммуникации, связать вместе не связанные пространственные сообщества, слить комьюнити в единый клубок связей. Что может пойти не так?
Городское гибридное пространство для социальных взаимоотношений скорее реальное или виртуальное?
За свою карьеру я несколько раз участвовал в проектах создания меж-пространственных городских медиа порталов. Они по разным обстоятельствах не были реализованы, но каждый раз я это предлагал со светлыми помыслами. Технологически это уже совсем не сложно: экран и камера в одном публичном месте, и тот же набор в другом. Ну сами посудите, как круто создать в городе портал в другой город, новое пространство меж-городской коммуникации, связать вместе не связанные пространственные сообщества, слить комьюнити в единый клубок связей. Что может пойти не так?
Портал в «нетуда» 2/3
И вот на днях один подобный портал между Дублином, Ирландия и Нью-Йорком, США был закрыт, проработав меньше недели. Все, потому что некоторые люди матерились, показывали оголенные, обычно скрываемые, части тела, и показывали видео терактов 11 сентября тем, кто коммуницировал со стороны Нью-Йорка. В обще так не часто себя люди ведут в городском публичном, да ещё и популярном пространстве.
И дело, кажется, в том, что подобный портал работает скорее по законам интернета, а не городского пространства. Разницу в коммуникации людей в реальной жизни и социальных сетях изучают с появления вторых. Исследования показывают, что в интернет-пространстве люди склонны вести себя более агрессивно, грубо, вызывающе и оскорбительно. Причина этому считается анонимность, отсутствие невербальных сигналов, появляется эффект деиндивидуализации, когда люди между собой чувствуют менее связанными.
И вот на днях один подобный портал между Дублином, Ирландия и Нью-Йорком, США был закрыт, проработав меньше недели. Все, потому что некоторые люди матерились, показывали оголенные, обычно скрываемые, части тела, и показывали видео терактов 11 сентября тем, кто коммуницировал со стороны Нью-Йорка. В обще так не часто себя люди ведут в городском публичном, да ещё и популярном пространстве.
И дело, кажется, в том, что подобный портал работает скорее по законам интернета, а не городского пространства. Разницу в коммуникации людей в реальной жизни и социальных сетях изучают с появления вторых. Исследования показывают, что в интернет-пространстве люди склонны вести себя более агрессивно, грубо, вызывающе и оскорбительно. Причина этому считается анонимность, отсутствие невербальных сигналов, появляется эффект деиндивидуализации, когда люди между собой чувствуют менее связанными.
Портал в «нетуда» 3/3
Также происходит групповая поляризация, дистанцирование и социальной динамики, приводящие к усилению групповой врождённости к чужим. Всё это укоренено в нашей биологии. Агрессия к «чужакам» и солидарность со «своими» — это то, что двигало развитее нашего вида, и стало отличительной чертой в отношение других гоминоидов. Эти чувства сдерживаются рамками современного городского пространства, где все немного чужаки и свои, что побуждает к диалогу и сдержанности, а не то получишь в ответ от незнакомца, не оценившего враждебное поведение.
Создаваемое порталом гибридное пространство между реальным и виртуальным мирами являет нам что-то между. Мы можем проявляет врождённость к другим с той стороны, не получив в ответ ощутимый урон. Спираль агрессии раскручивается, не ощутив противовесов. Это не значит, что каждый такой портал действует таким образом, но конкретно этот показал ту грань, где тенденция к умиротворению нашей биологической агрессии всё ещё не завершена. Может такие порталы для этого и нужны, чтобы проводить ненасильственные тестирование на не биологическую, а социальную человечность.
Также происходит групповая поляризация, дистанцирование и социальной динамики, приводящие к усилению групповой врождённости к чужим. Всё это укоренено в нашей биологии. Агрессия к «чужакам» и солидарность со «своими» — это то, что двигало развитее нашего вида, и стало отличительной чертой в отношение других гоминоидов. Эти чувства сдерживаются рамками современного городского пространства, где все немного чужаки и свои, что побуждает к диалогу и сдержанности, а не то получишь в ответ от незнакомца, не оценившего враждебное поведение.
Создаваемое порталом гибридное пространство между реальным и виртуальным мирами являет нам что-то между. Мы можем проявляет врождённость к другим с той стороны, не получив в ответ ощутимый урон. Спираль агрессии раскручивается, не ощутив противовесов. Это не значит, что каждый такой портал действует таким образом, но конкретно этот показал ту грань, где тенденция к умиротворению нашей биологической агрессии всё ещё не завершена. Может такие порталы для этого и нужны, чтобы проводить ненасильственные тестирование на не биологическую, а социальную человечность.