THEORY2

This page is read only. You can view the source, but not change it. Ask your administrator if you think this is wrong.
====== Meetings ======

Совещания по гранту проходят в очно-дистанционном формате по **четвергам**. Начало 10:30. Для дистанционных участников ссылка на Зум высылается за пару дней до совещания либо ее можно найти в разделе с [[ml4gamma:restricted:main|ограниченным доступом]].

[[archive24|Архив 2024г.]]

====== 2025г. ======

++++ Задачи на 2025г |
//Текущий статус на 20.02.2025г.//

  * Мультимодальные данные.
    * Имеющиеся наборы данных HiSCORE+IACT, объем. - П.В.
      * Выложено описание IACT на сайт: [[/ml4gamma/wdocs/data_format_iact]]
      * Выложено описание TAIGA-optics на сайт: [[/ml4gamma/wdocs/data_format_feb]]
      * Выложена статистика по существующему Монте-Карло на сайт: [[/ml4gamma/wdocs/data_mc_stats]]
  * CNN  как "автоэнкодер" - А.К.. [[/ml4gamma/wdocs/ae|Доп. материал]].
    * Приложение к HiSCORE - Ю.Д.+С.П.
    * Приложение к IACT, включая стерео режим. - Е.Г.+Д.Ж.
  * Нормализирующие потоки. Статус. А.Д.
    * Обзор проблемы - 20.2.2025г.
  * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
    * Лизе и Стасу передать им необходимую информацию для освоения.
    * Срок передачи материалов - 18.02.25.
++++

===== 16 июня 2025г. =====

**Присутствовали:**
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, <del>А.Разумов</del>. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * Конференции.
    * GRID'2025.
      * Были заявлены 2 доклада от меня. Программный комитет потребовал либо объединить (что невозможно), либо назначить 2 разных докладчиков. 
      * Доклад "Interpreting and Controlling Latent Space Parameters of Auto-Ecoders" будет делать Юля.
    * DLCP2025
      * Надо в течении 2-х дней представить аннотации. - А.К.
    * ISCRA-2025
      * Необходимы экспертные заключения. Документы переданы в комиссию.
    * Надо вприслать согласие о проведении экспертизы в НИИЯФ. Форму пришлю.
    * Соавторство С.П. и А.Д. Есть договоренности.
  * П.В. Предобработка АЧТ изображений.
  * Д.Ж. Аугментация стерео и мультимодальных данных. Статус.
  * Нормализирующие потоки.
    * А.Р., Е.П. Параметры Хилласа по данным АЧТ. Тестовая реализация. Статус.
  * А.К. О выделении существенных признаков с помощью VAE.
    * Добавление шума к признакам как способ выяснения устойчивости/чуствительности/зависимости признаков.
  * Существенные параметры.
    * Для HiSCORE. Статус. - С.П.+Ю.Д.
    * Для IACT.  Статус. - Е.Г.+Д.Ж.
  * Мультимодальные данные -> отложены.
    * А.К. Задача генерации изображений по физическим параметрам. Для этого обучаем вспомогательную сеть переводящие физические параметры в параметры скрытого пространства (Phys->Z). Далее восстанавливваем из Z изображение с помощью декодера. Сравниваем качество изхображений с исходными (после дополнительной чистки 7/14).
    * А.К. Задача совместного использования данных HiSCORE и IACT для определения энергии гамма (на основе МК). Используем модель промежуточного слияния.
      * Сравниваем три модели: только HiSCORE, только IACT и совместная модель. Количество параметров делаем примерно одинаковым (~1млн).
  * Прочее



===== 9 июня 2025г. =====

**Присутствовали:**
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, <del>А.Разумов</del>. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * Конференции.
    * GRID'2025.
      * Были заявлены 2 дрклада от меня. Программный комитет потребовал либо объединить (что невозможно), либо назначить 2 разных докладчиков. На доклад "Interpreting and Controlling Latent Space Parameters of Auto-Ecoders" предлагаю Лизу.
    * DLCP2025
      * Часть участников гранта не зарегистрировались.
    * ISCRA-2025
      * Необходимы экспертные заключения. У нас постер (П.В.) и доклад по определению энергии КЛ по данным АЧТ (Л.Г.)
    * Надо вприслать согласие о проведении экспертизы в НИИЯФ. Форму пришлю.
  * П.В. Предобработка АЧТ изображений.
  * Д.Ж. Аугментация стерео и мультимодальных данных. Статус.
  * Нормализирующие потоки.
    * А.Р., Е.П. Параметры Хилласа по данным АЧТ. Тестовая реализация. Статус.
  * А.К. О выделении существенных признаков с помощью VAE.
    * Добавление шума к признакам как способ выяснения устойчивости/чуствительности/зависимости признаков.
  * Существенные параметры.
    * Для HiSCORE. Статус. - С.П.+Ю.Д.
    * Для IACT.  Статус. - Е.Г.+Д.Ж.
  * Мультимодальные данные -> отложены.
    * А.К. Задача генерации изображений по физическим параметрам. Для этого обучаем вспомогательную сеть переводящие физические параметры в параметры скрытого пространства (Phys->Z). Далее восстанавливваем из Z изображение с помощью декодера. Сравниваем качество изхображений с исходными (после дополнительной чистки 7/14).
    * А.К. Задача совместного использования данных HiSCORE и IACT для определения энергии гамма (на основе МК). Используем модель промежуточного слияния.
      * Сравниваем три модели: только HiSCORE, только IACT и совместная модель. Количество параметров делаем примерно одинаковым (~1млн).
  * Прочее



===== 2 июня 2025г. =====

**Присутствовали:**
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Разумов. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * Д.Ж. Аугментация стерео и мультимодальных данных. Статус.
  * Нормализирующие потоки.
    * Е.П. Параметры Хилласа по данным АЧТ. Тестовая реализация. Статус.
    * А.Р. Выделение гамма по данным  HiSCORE. Тестовая реализация. Статус
  * А.К. Несколько слов о выделении существенных признаков с помощью VAE.
    * Добавление шума к признакам как способ выяснения устойчивости/чуствительности/зависимости признаков.
      * 14.04. С.П.: Передать сигмы для Ю.Д.
    * Ю.Д. Статус.
      * 21.04. С.П. писал, но ответа нет.
  * Восстановление параметров ШАЛ из скрытого пространства 
    * А.К. Посмотреть на матрицу колледяции сркытых параметров и псочитать сумму коэффициентов по столбцам. После этого попробовать следующие варианты.
      - Обучить конвертор Z'->Phys, где Z' - это пространство скрытых параметров за исключением параметра с максимальной суммой коэффициентов.
      - Переобучить сеть так, чтобы скрытое пространство Z1 содержало на 1 параметр меньше.
      * Сравнить варианты 1, 2 и исходный по точности предсказания.
    * Для HiSCORE. Статус. - С.П.+Ю.Д.
    * Для IACT.  Статус. - Е.Г.+Д.Ж.
  * А.К. Задача генерации изображений по физическим параметрам. Для этого обучаем вспомогательную сеть переводящие физические параметры в параметры скрытого пространства (Phys->Z). Далее восстанавливваем из Z изображение с помощью декодера. Сравниваем качество изхображений с исходными (после дополнительной чистки 7/14).
  * А.К. Задача совместного использования данных HiSCORE и IACT для определения энергии гамма (на основе МК). Используем модель промежуточного слияния.
    * Сравниваем три модели: только HiSCORE, только IACT и совместная модель. Количество параметров делаем примерно одинаковым (~1млн).
  * Конференции.
    * А.К. Темы докладов.
      - Grid2025/Постер: Проблема аугментация данных АЧТ в стерео режиме. - А.К.+Д.Ж.
      - DLCP2025+GRID2025: Извлечение с помощью МО существенных признаков из данных HiSCORE по космическим лучам - Ю.Д.
      - DLCP2025: Извлечение с помощью МО существенных признаков из данных IACT по космическим лучам - Е.Г.
      - Использование параметров Хилласа в методе МО для анализа данных АЧТ. - Е.Г.
      - DLCP2025: Влияние методов предобработки данных с черенковских телескопов на точность восстановления параметров ШАЛ - П.В.
      - DLCP2025/GRID2025/постер: Первые результаты применение метода нормализующих потоков для извлечения редких гамма событий в эксперименте TAIGA. - Е.П.+А.Р.+А.Д.
      - DLCP2025: Вопрос интерпретации параметров скрытого слоя в глубоких НС. - А.К.
  * Прочее


===== 21 апреля 2025г. =====

**Присутствовали:**
А.Крюков, <del>Ю.Дубенская</del>, Е.Постников, <del>Д.Журов</del>, П.Волчугов, Е.Гресь, А.Разумов. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * Д.Ж. Аугментация стерео и мультимодальных данных. Статус.
    * 7.04.2025. Списались с П.В. Больших успехов нет.
    * От Павла получены данные.
    * 21.04. П.В. Согласовывает систему координат.
  * Нормализирующие потоки.
    * Е.П. Параметры Хилласа по данным АЧТ. Тестовая реализация. Статус.
      * 7.04.2025. Пока подвижки нет.
      * 14.04.2025. Особых подвижек нет.
      * 21.04. TF падает при запуске примера.
    * А.Р. Выделение гамма по данным  HiSCORE. Тестовая реализация. Статус
      * 14.04.2025. Подвижки нет.
      * 21.04.2025. А.Р. Пример от А.Д. работает.
        * Посмотреть другие примеры с внешними данными. - А.К.
          * А.Д. - FastFlow
  * * Тестирование моделей.
    * Выложить ПО на forgejo - Ю.Д., С.П., Е.Г.
      * 7.04. Пока не начинали.
      * 14.04. Ю.Д. Ничего.
      * 14.04. С.П. Сегодня должен выложить.
      * Е.Г. Выложила.
    * Е.Г.+Е.П. Статус работ по IACT. 
      * Обучение с фильтром 7/14 пока не получается.
    * С.П.+А.Р. Статус работ по HiSCORE.
      * С протонами раза в 2 хуже чем с гамма.
  * А.К. Несколько слов о выделении существенных признаков с помощью VAE.
    * Добавление шума к признакам как способ выяснения устойчивости/чуствительности/зависимости признаков.
      * 14.04. С.П.: Передать сигмы для Ю.Д.
    * Ю.Д. Статус.
      * 21.04. С.П. писал, но ответа нет.
  * Восстановление параметров ШАЛ из скрытого пространства 
    * А.К. Посмотреть на матрицу колледяции сркытых параметров и псочитать сумму коэффициентов по столбцам. После этого попробовать следующие варианты.
      - Обучить конвертор Z'->Phys, где Z' - это пространство скрытых параметров за исключением параметра с максимальной суммой коэффициентов.
      - Переобучить сеть так, чтобы скрытое пространство Z1 содержало на 1 параметр меньше.
      * Сравнить варианты 1, 2 и исходный по точности предсказания.
    * Для HiSCORE. Статус. - С.П.+Ю.Д.
      * Построить кореляционные таблица: sum{по i по всей валидационной выборке,(Xi-<X>)(Yi-<Y>)}/(sigX*sigY)
    * Для IACT.  Статус. - Е.Г.+Д.Ж.
      * Построить кореляционные таблица: sum{по i по всей валидационной выборке,(Xi-<X>)(Yi-<Y>)}/(sigX*sigY)
    * 1) X,Y - из скрытого пространства. 2) X - из скрытого пространства, а Y - их физического пространства, например, Хиллас.
  * А.К. Задача генерации изображений по физическим параметрам. Для этого обучаем вспомогательную сеть переводящие физические параметры в параметры скрытого пространства (Phys->Z). Далее восстанавливваем из Z изображение с помощью декодера. Сравниваем качество изхображений с исходными (после дополнительной чистки 7/14).
  * А.К. Задача совместного использования данных HiSCORE и IACT для определения энергии гамма (на основе МК). Используем модель промежуточного слияния.
    * Сравниваем три модели: только HiSCORE, только IACT и совместная модель. Количество параметров делаем примерно одинаковым (~1млн).
  * Конференции.
    * Для гранта надо опубликовать **не менее 4 работ**
    * А.К. Темы докладов.
      - Grid2025/Постер: Проблема аугментация данных АЧТ в стерео режиме. - А.К.+Д.Ж.
      - DLCP2025+GRID2025: Извлечение с помощью МО существенных признаков из данных HiSCORE по космическим лучам - Ю.Д.
      - DLCP2025: Извлечение с помощью МО существенных признаков из данных IACT по космическим лучам - Е.Г.
      - Использование параметров Хилласа в методе МО для анализа данных АЧТ. - Е.Г.
      - DLCP2025: Влияние методов предобработки данных с черенковских телескопов на точность восстановления параметров ШАЛ - П.В.
      - DLCP2025/GRID2025/постер: Первые результаты применение метода нормализующих потоков для извлечения редких гамма событий в эксперименте TAIGA. - Е.П.+А.Р.+А.Д.
      - DLCP2025: Вопрос интерпретации параметров скрытого слоя в глубоких НС. - А.К.
  * А.К. Регистрация ПО.  <del>-> 14.04 -> 21.04</del>**-> 28.04**
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее

==== Иллюстрации ====

{{:ml4gamma:meetings:iact_his.png?400|}}
===== 14 апреля 2025г. =====

**Присутствовали:**
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Разумов. \\ 
**Ассоциированные члены:** <del>А.Демичев</del>, С.Поляков.

  * Д.Ж. Аугментация стерео и мультимодальных данных. Статус.
    * 7.04.2025. Списались с П.В. Больших успехов нет.
    * От Павла получены данные.
  * Нормализирующие потоки.
    * Е.П. Параметры Хилласа по данным АЧТ. Тестовая реализация. Статус.
      * 7.04.2025. Пока подвижки нет.
      * Особых подвижек нет.
    * А.Р. Выделение гамма по данным  HiSCORE. Тестовая реализация. Статус
      * Подвижки нет.
  * * Тестирование моделей.
    * Выложить ПО на forgejo - Ю.Д., С.П., Е.Г.
      * 7.04.2025. Пока не начинали.
      * Ю.Д. Ничего.
      * С.П. Сегодня должен выложить.
      * Е.Г. Выложила.
    * Е.Г.+Е.П. Статус работ по IACT. 
      * Обучение с фильтром 7/14 пока не получается.
    * С.П.+А.Р. Статус работ по HiSCORE.
      * С протонами раза в 2 хуже чем с гамма.
  * А.К. Несколько слов о выделении существенных признаков с помощью VAE.
    * Добавление шума к признакам как способ выяснения устойчивости/чуствительности/зависимости признаков.
      * С.П.: Передать сигмы для Ю.Д.
    * Ю.Д. Статус.
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. Статус. - С.П.+Ю.Д.
    * Построить кореляционные таблица: sum{по i по всей валидационной выборке,(Xi-<X>)(Yi-<Y>)}/(sigX*sigY)
  * Восстановление параметров ШАЛ из скрытого пространства для IACT.  Статус. - Е.Г.+Д.Ж.
    * Построить кореляционные таблица: sum{по i по всей валидационной выборке,(Xi-<X>)(Yi-<Y>)}/(sigX*sigY)
  * 1) X,Y - из скрытого пространства. 2) X - из скрытого пространства, а Y - их физического пространства, например, Хиллас.
  * Конференции. **-> 14 апреля**. 
    * Для гранта надо опубликовать **не менее 4 работ**
    * А.К. Темы докладов.
      - Grid2025/Постер: Проблема аугментация данных АЧТ в стерео режиме. - А.К.+Д.Ж.
      - DLCP2025+GRID2025: Извлечение с помощью МО существенных признаков из данных HiSCORE по космическим лучам - Ю.Д.
      - DLCP2025: Извлечение с помощью МО существенных признаков из данных IACT по космическим лучам - Е.Г.
      - Использование параметров Хилласа в методе МО для анализа данных АЧТ. - Е.Г.
      - DLCP2025: Влияние методов предобработки данных с черенковских телескопов на точность восстановления параметров ШАЛ - П.В.
      - DLCP2025/GRID2025/постер: Первые результаты применение метода нормализующих потоков для извлечения редких гамма событий в эксперименте TAIGA. - Е.П.+А.Р.+А.Д.
      - DLCP2025: Вопрос интерпретации параметров скрытого слоя в глубоких НС. - А.К.
  * А.К. Регистрация ПО.  <del>-> 14 апреля</del>**-> 21 апреля**
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее
    * В архиве у статьи "Gamma/hadron separation in the TAIGA experiment with neural network methods" нет ссылки на журнал. - Е.Г.


===== 7 апреля 2025г. =====

**Присутствовали:**
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, <del>П.Волчугов</del>, Е.Гресь, <del>А.Разумов</del>. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * Д.Ж. Аугментация стерео и мультимодальных данных. Статус.
    * Списались с П.В. Больших успехов нет.
  * Нормализирующие потоки.
    * Е.П. Параметры Хилласа по данным АЧТ. Тестовая реализация. Статус.
      * Пока подвижки нет.
    * А.Р. Выделение гамма по данным  HiSCORE. Тестовая реализация. Статус
    * А.Д. В презентации А.Д. есть ссылки на возможные модели в TF.
  * * Тестирование моделей.
    * Выложить ПО на forgejo - Ю.Д., С.П., Е.Г.
      * Пока не начинали.
    * Е.Г.+Е.П. Статус работ по IACT. 
    * С.П.+А.Р. Статус работ по HiSCORE.
  * А.К. Несколько слов о выделении существенных признаков с помощью VAE.
    * Добавление шума к признакам как способ выяснения устойчивости/чуствительности/зависимости признаков.
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. Статус. - С.П.+Ю.Д.
    * Построить кореляционные таблица: sum{по i по всей валидационной выборке,(Xi-<X>)(Yi-<Y>)}/(sigX*sigY)
  * Восстановление параметров ШАЛ из скрытого пространства для IACT.  Статус. - Е.Г.+Д.Ж.
    * Построить кореляционные таблица: sum{по i по всей валидационной выборке,(Xi-<X>)(Yi-<Y>)}/(sigX*sigY)
  * 1) X,Y - из скрытого пространства. 2) X - из скрытого пространства, а Y - их физического пространства, например, Хиллас.
  * А.К. Обратное преобразование: Хиллас -> параметры скрытого пространства.
  * Конференции. **-> 14 апреля**. 
    * Для гранта надо опубликовать **не менее 4 работ**
    * А.К. Темы докладов.
      - Постер: Проблема аугментация данных АЧТ в стерео режиме. - А.К.+Д.Ж.
      - Извлечение с помощью МО существенных признаков из данных HiSCORE по космическим лучам - Ю.Д.
      - Извлечение с помощью МО существенных признаков из данных IACT по космическим лучам - Е.Г.
      - Использование параметров Хилласа в методе МО для анализа данных АЧТ. - Е.Г.
      - Применение нормализующих потоков для извлечения гамма событий в эксперименте TAIGA. - Е.П.+А.Р.+А.Д.
      - Вопрос интерпретации параметров скрытого слоя в глубоких НС. - А.К.
  * А.К. Регистрация ПО.  **-> 14 апреля**
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее
    * Следующее совещание **14 апреля, понедельник**
    * В архиве у статьи "Gamma/hadron separation in the TAIGA experiment with neural network methods" нет ссылки на журнал. - Е.Г.

===== 31 марта 2025г. =====

**Присутствовали:** \\ 
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Разумов. \\ 
**Ассоциированные члены:** А.Демичев, <del>С.Поляков</del>.

  * Данные - П.В.
    * Описание (предварительное) формата данных для HiSCORE сразу после CORSIKA.
      * П.В.: Есть читалка на сайте ТАЙГА
      * Попытка чтения - 31.03.25
      * А.К.Ж Это не автоматическая ли библиотека (DLC)?
      * П.В. Исследование влияние клиннинга.
  * А.К. Аугментация стерео и мультимодальных данных.
    * Д.Ж. Краткий отчет.
    * Исследование аугментации. П.В.+Д.Ж.
  * Нормализирующие потоки.
    * gridmsu31 - установить TF (Docker?). - А.К.
      * На gridmsu31 не получится. Скорее всего это будет на lcg37, но она пока не готова.
    * Параметры Хилласа по данным АЧТ. Тестовая реализация - Е.П.
      * Привести ссылку на инструкцию по установке TF. 
        * Под Windows: [[https://www.tensorflow.org/install/pip?hl=ru]]
      * Установка TF/PyTorch на локальный компьютер.  - Проверка на "MNIST" - 20.03.2025.
    * Выделение гамма по данным  HiSCORE. Тестовая реализация. - А.Р.
      * Установлен PyTorch. - Проверка на "MNIST"
      * Изучается способ построения моделей.
  * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
    * Выложить ПО на forgejo - Ю.Д., С.П.
    * Статус работ по IACT. - Е.Г.+Е.П.
    * Статус работ по HiSCORE. - С.П.+А.Р.
  * Установить TF на lcg05 (lcg40?) - А.К.
    * Пока не удается согласовать все необходимые библиотеки.
    * А.К. Буду устанавливать в docker.
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. Статус. - С.П.+Ю.Д.
    * <del>Построить кореляционные таблица</del>
    * Вместо этого строим гистограмму dN/d(err), где err=par_rec-par_true
  * Восстановление параметров ШАЛ из скрытого пространства для IACT.  Статус. - Е.Г.+Д.Ж.
    * <del>Построить кореляционные таблица</del>
    * Вместо этого строим гистограмму dN/d(err), где err=par_rec-par_true
  * Конференции.
    * Список конференций на сайте.
    * Для гранта надо опубликовать **не менее 4 работ**
    * А.К. Темы докладов.
      - Постер: Проблема аугментация данных АЧТ в стерео режиме. - А.К.+Д.Ж.
      - Извлечение с помощью МО существенных признаков из данных HiSCORE по космическим лучам - Ю.Д.
      - Извлечение с помощью МО существенных признаков из данных IACT по космическим лучам - Е.Г.
      - Использование параметров Хилласа в методе МО для анализа данных АЧТ. - Е.Г.
      - Применение нормализующих потоков для извлечения гамма событий в эксперименте TAIGA. - Е.П.+А.Р.+А.Д.
      - Вопрос интерпретации параметров скрытого слоя в глубоких НС. - А.К.
  * А.К. Регистрация ПО.  - В работе.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее
    * Forgejo (Git)



===== 24 марта 2025г. =====

**Присутствовали:** \\ 
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Разумов. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * П.В.: Влияние шумов на точность определения параметров Хилласа.
    * Проблема отрицательных значений. (а) - сдвинуть все вверх, (б) обнулить значения <0.
    * П.В.: **Новостей пока нет**
  * Данные - П.В.
    * Описание (предварительное) формата данных для HiSCORE сразу после CORSIKA.
      * П.В.: Есть читалка на сайте ТАЙГА
      * Попытка чтения - 31.03.25
    * Протоны для АЧТ.
      * Расшифровка кодов уточнено.
  * А.К. Аугментация стерео и мультимодальных данных
    * Д.Ж. Краткий отчет.
  * Нормализирующие потоки.
    * gridmsu31 - установить TF (Docker?). - А.К.
      * На gridmsu31 не получится. Скорее всего это будет на lcg37, но она пока не готова.
    * Параметры Хилласа по данным АЧТ. Тестовая реализация - Е.П.
      * Привести ссылку на инструкцию по установке TF. 
        * Под Windows: [[https://www.tensorflow.org/install/pip?hl=ru]]
      * Установка TF/PyTorch на локальный компьютер.  - Проверка на "MNIST" - 20.03.2025.
    * Выделение гамма по данным  HiSCORE. Тестовая реализация. - А.Р.
      * Установлен PyTorch. - Проверка на "MNIST"
      * Изучается способ построения моделей.
  * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
    * Выложить ПО на forgejo - Ю.Д., С.П.
    * Статус работ по IACT. - Е.Г.+Е.П.
    * Статус работ по HiSCORE. - С.П.+А.Р.
  * Установить TF на lcg05 (lcg40?) - А.К.
    * Пока не удается согласовать все необходимые библиотеки.
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. Статус. - С.П.+Ю.Д.
    * <del>Построить кореляционные таблица</del>
    * Вместо этого строим гистограмму dN/d(err), где err=par_rec-par_true
  * Восстановление параметров ШАЛ из скрытого пространства для IACT.  Статус. - Е.Г.+Д.Ж.
    * <del>Построить кореляционные таблица</del>
    * Вместо этого строим гистограмму dN/d(err), где err=par_rec-par_true
  * Конференции.
    * Список конференций на сайте.
    * Для гранта надо опубликовать **не менее 4 работ**
    * А.К. Темы докладов.
      - Постер: Проблема аугментация данных АЧТ в стерео режиме. - А.К.+Д.Ж.
      - Извлечение с помощью МО существенных признаков из данных HiSCORE по космическим лучам - Ю.Д.
      - Извлечение с помощью МО существенных признаков из данных IACT по космическим лучам - Е.Г.
      - Использование параметров Хилласа в методе МО для анализа данных АЧТ. - Е.Г.
      - Применение нормализующих потоков для извлечения гамма событий в эксперименте TAIGA. - Е.П.+А.Р.+А.Д.
      - Вопрос интерпретации параметров скрытого слоя в глубоких НС. - А.К.
  * А.К. Регистрация ПО.  - В работе.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее
    * Forgejo (Git)



===== 17 марта 2025г. =====

**Присутствовали:** \\ 
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Разумов. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * П.В.: Влияние шумов на точность определения параметров Хилласа.
    * Проблема отрицательных значений. (а) - сдвинуть все вверх, (б) обнулить значения <0.
  * Данные - П.В.
    * Описание (предварительное) формата данных для HiSCORE сразу после CORSIKA.
    * Протоны для АЧТ.
  * А.К. Аугментация стерео и мультимодальных данных
  * Нормализирующие потоки.
    * gridmsu31 - установить TF (Docker?). - А.К.
      * На gridmsu31 не получится. Скорее всего это будет на lcg37, но она пока не готова.
    * Параметры Хилласа по данным АЧТ. Тестовая реализация - Е.П.
      * Привести ссылку на инструкцию по установке TF. 
        * Под Windows: [[https://www.tensorflow.org/install/pip?hl=ru]]
      * Установка TF/PyTorch на локальный компьютер.  - Проверка на "MNIST" - 20.03.2025.
    * Выделение гамма по данным  HiSCORE. Тестовая реализация. - А.Р.
      * Установлен PyTorch. - Проверка на "MNIST"
      * Изучается способ построения моделей.
  * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
    * Выложить ПО на forgejo - Ю.Д., С.П.
    * Статус работ по IACT. - Е.Г.+Е.П.
    * Статус работ по HiSCORE. - С.П.+А.Р.
  * Установить TF на lcg05 (lcg40?) - А.К.
    * Пока не удается согласовать все необходимые библиотеки.
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. Статус. - С.П.+Ю.Д.
    * <del>Построить кореляционные таблица</del>
    * Вместо этого строим гистограмму dN/d(err), где err=par_rec-par_true
  * Восстановление параметров ШАЛ из скрытого пространства для IACT.  Статус. - Е.Г.+Д.Ж.
    * <del>Построить кореляционные таблица</del>
    * Вместо этого строим гистограмму dN/d(err), где err=par_rec-par_true
  * Конференции.
    * Список конференций на сайте.
    * Для гранта надо опубликовать **не менее 4 работ**
    * А.К. Темы докладов.
      - Постер: Проблема аугментация данных АЧТ в стерео режиме. - А.К.+Д.Ж.
      - Извлечение с помощью МО существенных признаков из данных HiSCORE по космическим лучам - Ю.Д.
      - Извлечение с помощью МО существенных признаков из данных IACT по космическим лучам - Е.Г.
      - Использование параметров Хилласа в методе МО для анализа данных АЧТ. - Е.Г.
      - Применение нормализующих потоков для извлечения гамма событий в эксперименте TAIGA. - Е.П.+А.Р.+А.Д.
      - Вопрос интерпретации параметров скрытого слоя в глубоких НС. - А.К.
  * А.К. Регистрация ПО.  - В работе.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее
    * Forgejo (Git)


===== 13 марта 2025г. =====

**Присутствовали:** \\ 
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, <del>Е.Гресь</del>, А.Рузумов. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * Публикации в Вестнике.
    * Ожидаются в <del>начале</del> <del>середине</del> **конце** <del>февраля</del> марта.
  * П.В.: Влияние шумов на точность определения параметров Хилласа.
    * Проблема отрицательных значений. (а) - сдвинуть все вверх, (б) обнулить значения <0.
  * Данные - П.В.
    * Описание (предварительное) формата данных для HiSCORE сразу после CORSIKA.
      * Гринюк?
    * Протоны для АЧТ.
  * Нормализирующие потоки. Статус. - А.Д.
    * Выложить презентации в рабочие материалы. - А.Д.
    * А.К. На lcg05 есть docker, под которым можно запустить TF. 
    * gridmsu31 - установить TF (Docker?). - А.К.
      * группа docker на lcg05.
    * Параметры Хилласа по данным АЧТ. Тестовая реализация - Е.П.
      * Привести ссылку на инструкцию по установке TF. 
      * Установка TF/PyTorch на локальный компьютер.  - Проверка на "MNIST" - 20.03.2025.
    * Выделение гамма по данным  HiSCORE. Тестовая реализация. - А.Р.
      * Установлен PyTorch. - Проверка на "MNIST"
      * Изучается способ построения моделей.
  * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
    * Статус работ по IACT. - Е.Г.+Е.П.
    * Статус работ по HiSCORE. - С.П.+А.Р.
  * Установить TF на lcg05 (lcg40?) - А.К.
    * Пока не удается согласовать все необходимые библиотеки.
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. Статус. - С.П.+Ю.Д.
    * Построить кореляционные таблица
      * ШАЛ<-->Скрытое пространство, 
      * Скрытое пространство<-->Скрытое пространство
  * Восстановление параметров ШАЛ из скрытого пространства для IACT.  Статус. - Е.Г.+Д.Ж.
    * Построить кореляционные таблица
      * ШАЛ<-->Скрытое пространство, 
      * Скрытое пространство<-->Скрытое пространство
  * Конференции.
    * Открыта регистрация на GRID'2025
    * Список на сайте.
    * А.К. **Обсудить темы докладов** - В работе.
  * А.К. Регистрация ПО.  - В работе.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее
    * Forgejo (Git)
    * Следующее совещание будет в понедельник, **очно**.


===== 06 марта 2025г. =====

**Присутствовали:** \\ 
А.Крюков, <del>Ю.Дубенская</del>, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Рузумов. \\ 
**Ассоциированные члены:** А.Демичев, С.Поляков.

  * Публикации в Вестнике.
    * Ожидаются в <del>начале</del> <del>середине</del> **конце** февраля.
    * Выложить в ArXiv.
      * Ю.Д.: Выложила. На модерации.
  * П.В.: Влияние шумов на точность определения параметров Хилласа.
  * Описание (предварительное) формата данных для HiSCORE сразу после CORSIKA. - П.В.
  * Нормализирующие потоки. Статус. - А.Д.
  * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
    * Статус работ по IACT. - Е.Г.+Е.П.
    * Статус работ по HiSCORE. - С.П.+А.Р.
  * А.К. Права доступа к docker для Е.Г. - **Исправлено**
  * А.К. Установить TF на lcg05 (lcg40?) - **В работе**
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. - С.П.+Ю.Д.
    * Построить кореляционные таблица
      * ШАЛ<-->Скрытое пространство, 
      * Скрытое пространство<-->Скрытое пространство
  * Восстановление параметров ШАЛ из скрытого пространства для IACT. - Е.Г.+Д.Ж.
    * Построить кореляционные таблица
      * ШАЛ<-->Скрытое пространство, 
      * Скрытое пространство<-->Скрытое пространство
  * Конференции.
    * ИТНТ-2025, абстракт <del>до 18.02.25</del> **проден до 4 марта, 2025г.**!
    * Открыта регистрация на GRID'2025
    * Список на сайте.
    * А.К. **Обсудить темы докладов** - В работе.
  * А.К. Регистрация ПО.  - В работе.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
  * Прочее
    * Forgejo (Git)


===== 27 фев. 2025г. =====

**Присутствовали:** \\ 
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Рузумов. \\ А.Демичев, С.Поляков.

  * Публикации в Вестнике.
    * Ожидаются в <del>начале</del> <del>середине</del> **конце** февраля.
    * Есть репринты номера. Будут доступны сегодня на сайте DLCP2024.
    * Выложить в ArXiv.
      * Пока нет: **Ю.Д. - срок 27.02**.
        * Проблем нет, просто не сделала.
  * Задачи на 2025г.
    * Мультимодальные данные.
      * Имеющиеся наборы данных HiSCORE+IACT, объем. - П.В.
        * Выложено описание (предварительное) на сайт: [[/ml4gamma/wdocs/data_format_iact]]
      * CNN  как "автоэнкодер" - А.К.. [[../wdocs/ae|Доп. материал]].
      * Приложение к HiSCORE - Ю.Д.+С.П.
      * Приложение к IACT, включая стерео режим. - Е.Г.+Д.Ж.
    * Нормализирующие потоки. Статус. А.Д.
      * Образовать группу из А.Д., Е.П., А.Р. для тестовой реализации модели.
        * **Срок 3 марта.** - А.Д.<-->Скрытое пространство
    * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
      * Лизе и Стасу передать им необходимую информацию для освоения.
        * Срок передачи материалов - 24.02.25.
          * **Срок 24.02.25** - С.П.
          * **Срок 03.03.25** - Е.Г.
        * Проверить права доступа к docker для Лизы - **Срок 03.03.25,** А.К.
        * Установить TF на lcg05 (lcg40?) - **Срок 03.03.25,** А.К.
  * Восстановление параметров ШАЛ из скрытого пространства для HiSCORE. - С.П., Ю.Д.
    * Построить кореляционные таблица
      * ШАЛ<-->Скрытое пространство, Скрытое пространство<-->Скрытое пространство
  * Провести оценку точности для поднабора с малым числом станции для той же самой сети.
    * Медианное устреднение - П.В.
  * Конференции.
    * ИТНТ-2025, абстракт <del>до 18.02.25</del> **проден до 4 марта, 2025г.**!
    * Открыта регистрация на GRID'2025
    * Список на сайте.
    * **Обсудить темы докладов**
  * Регистрация ПО.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
    * Посмотреть до 24.02.2025. - А.К.
  * Прочее

Доклад С.Полякова

===== 20 фев. 2025г. =====

Присутствовали: \\ 
А.Крюков, Ю.Дубенская, Е.Постников, Д.Журов, П.Волчугов, Е.Гресь, А.Рузумов. \\ А.Демичев, С.Поляков.

  * Публикации в Вестнике.
    * Ожидаются в <del>начале</del> <del>середине</del> **конце** февраля.
    * Выложить в ArXiv.
      * А.Д., Е.Г., А.К.(С.П.)
      * Пока нет: **Ю.Д. - срок 24.02**.
  * Задачи на 2025г.
    * Мультимодальные данные.
      * Имеющиеся наборы данных HiSCORE+IACT, объем. - П.В.
        * Выложено описание (предварительное) на сайт: [[/ml4gamma/wdocs/data_format_iact]]
      * CNN  как "автоэнкодер" - А.К.. [[../wdocs/ae|Доп. материал]].
      * Приложение к HiSCORE - Ю.Д.+С.П.
      * Приложение к IACT, включая стерео режим. - Е.Г.+Д.Ж.
    * Нормализирующие потоки. Статус. А.Д.
      * Образовать группу из А.Д., Е.П., А.Р. для тестовой реализации модели.
    * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
      * Лизе и Стасу передать им необходимую информацию для освоения.
        * Срок передачи материалов - 24.02.25.
        * Проверить права доступа к docker для Лизы - А.К.
        * Установить TF на lcg05 (lcg40?) - А.К.
  * Конференции.
    * ИТНТ-2025, абстракт <del>до 18.02.25</del> **проден до 4 марта, 2025г.**!
    * Список на сайте.
  * Регистрация ПО.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг. Получен.
    * С.П./А.К. - HiScore, Получен реферат.
    * Посмотреть до 24.02.2025. - А.К.
  * Прочее
    * На сайте организован раздел [[/ml4gamma/wdocs/main|Рабочие материалы]].

Доклад: А.Демичев, {{ :ml4gamma:restricted:nf_pres_revised.pdf |Normalizing Flows. Short review of Flow-based Deep Generative Models}}. 

Дополнительные материалы: 
  * [[https://education.yandex.ru/handbook/ml/article/normalizuyushie-potoki|8.4. Нормализующие потоки]]
  * [[https://lilianweng.github.io/posts/2018-10-13-flow-models/|Flow-based Deep Generative Models]]
===== 11 фев. 2025г. =====

Присутствовали: \\ 
А.Крюков, Ю.Дубенская, Е.Постников, <del>Д.Журов</del>, П.Волчугов, Е.Гресь, А.Рузумов. \\ А.Демичев, С.Поляков.

  * Публикации в Вестнике.
    * Ожидаются в <del>начале</del> **середине** февраля.
    * Выложить в ArXiv.
      * А.Д., Е.Г.
      * Пока нет: 
        * Ю.Д. - срок 14.02.
        * А.К.. Получил от С.П., но пока не выложил. Срок 14.02
  * Задачи на 2025г.
    * Мультимодальные данные.
      * Имеющиеся наборы данных HiSCORE+IACT, объем. - П.В.
      * Что еще нужно?
      * Объем и параметры наборов, формат+ читалки, где это все находятся.
        * Выложит в доп. материалы к совещаниям. - Срок 14 февраля.
    * CNN  как "автоэнкодер" - А.К.. [[../wdocs/main|Доп. материал]].
      * Приложение к HiSCORE - Ю.Д.+С.П.
      * Приложение к IACT, включая стерео режим. - Е.Г.+Д.Ж.
    * Нормализирующие потоки. Статус. А.Д.
      * Предварительно - сообщение на 20 февраля.
    * Тестирование моделей. - Е.П.(IACT)+А.Р.(HiSCORE)
      * Лизе и Стасу передать им необходимую информацию для освоения.
        * Срок передачи материалов - 18.02.25.
  * Конференции.
    * ИТНТ-2025, **абстракт до 18.02.25**!
    * Список на сайте.
  * Регистрация ПО.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг.
    * С.П./А.К. - HiScore 
    * Прислать до 14 февраля.
  * Прочее
    * Электричество в корпусе восстановлено. Компьютеры должны работать.


===== 6 фев. 2025г. =====

Присутствовали: \\ 
А.Крюков, С.Поляков, Д.Журов, П.Волчугов, <del>Е.Гресь</del>, Е.Постников, А.Демичев, <del>А.Рузумов</del>, Ю.Дубенская.

  * Публикации в Вестнике.
    * Ожидаются в начале февраля.
    * Выложить в ArXiv.
      * А.Д., Е.Г.
      * Пока нет: Ю.Д. и С.П. - срок 8 февраля.
  * Спектры гамма и анфолдинг. - П.Волчугов
  * Задачи на 2025г.
    * Основное - мультимодальные данные.
    * Акцент на методику не только для TAIGA.
    * Нормализирующие потоки.
  * Конференции.
    * Список на сайте.
  * Регистрация ПО.
    * Ю.Д. - GAN. Получен реферат.
    * Е.Г. - AE+Interp, Воблинг.
    * С.П./А.К. - HiScore 
  * Прочее
    * Электричество в корпусе.

**//Е.Г.//** \\ Обзор работы по улучшению анализа на основании параметров Хилласа в H.E.S.S.
===== 30 янв. 2025г. =====

Присутствовали: \\ 
А.Крюков, С.Поляков, Д.Журов, <del>П.Волчугов</del>, Е.Гресь, Е.Постников, А.Демичев, А.Рузумов, Ю.Дубенская.

  * Публикации в Вестнике.
    * Ожидаются в начале февраля.
    * Выложить в ArXiv.
  * План на 2025г.
    * Основное - мультимодальные данные.
    * Акцент на методику не только для TAIGA.
    * Нормализирующие потоки.
  * Конференции.
    * Список на сайте.
  * Регистрация ПО.
    * Ю.Д. - GAN
    * Е.Г. - AE+Interp, Воблинг.
    * С.П./А.К. - HiScore
  * Прочее
    * Электричество в корпусе.

**//Е.Г.//** \\ Обзор работы по улучшению анализа на основании параметров Хилласа в H.E.S.S.
===== 23 янв. 2025г. =====

Присутствовали: \\ 
А.Крюков, С.Поляков, Д.Журов, П.Волчугов, Е.Гресь, Е.Постников, А.Демичев, А.Рузумов, Ю.Дубенская.

  * Отчет за 2024г.
    * Публикации в Вестнике.
  * План на 2025г.
    * Основное - мультимодальные данные.
    * Акцент на методику не только для TAIGA.
    * Нормализирующие потоки.
  * Конференции.
    * Список на сайте.
  * Регистрация ПО.
  * Прочее
    * Регулярные, очно-заочные совещания по понедельникам или вторникам. Тематические совещания по четвергам.
    * Электричество в корпусе.