Data Science
Каркасные структуры против моделей
00
Вопрос или проблема Мой второй вопрос (Модели против алгоритмов) заключается в том, какова разница между моделями и фреймворками? Сначала давайте взглянем на определения. Согласно Википедии: В компьютерном программировании программный фреймворк — это
Data Science
Пользовательские соединения между слоями Keras
00
Вопрос или проблема Я хотел бы вручную определить соединения в нейронной сети между слоями, используя TensorFlow и keras с Python. По умолчанию соединения устанавливаются между всеми парами нейронов. Мне нужно сделать соединения, как на рисунке ниже.
Data Science
Когда использование весов классов плохо?
00
Вопрос или проблема У меня есть база данных с 50 разными классами. Один из классов содержит в 10 раз больше данных, чем другие классы. Каждый класс имеет ~20K образцов, а “большой” класс имеет ~200K образцов. При обучении модели классификации
Data Science
Обработка большого набора данных, состоящего из файлов npy
00
Вопрос или проблема У меня есть большое количество файлов npy (448 файлов), каждый из которых состоит примерно из 12 тысяч кадров (изображения RGB 150×150), которые вместе составляют входные данные для моей нейронной сети (X).
Data Science
Правильный способ вычисления Dice-коэффициента для сегментации изображений?
00
Вопрос или проблема В бинарной сегментации изображений для заданного набора изображений, истинная маска и предсказанная маска. Как вычислить коэффициент Дайса? Нужно ли вычислять коэффициент Дайса для каждого изображения отдельно, а затем находить среднее по всем изображениям?
Data Science
Объяснение потерь кросс-энтропии
00
Вопрос или проблема Предположим, я строю нейронную сеть для классификации. Последний слой – это плотный слой с активацией Softmax. У меня есть пять различных классов для классификации. Предположим, для одного примера обучения истинная метка равна
Data Science
Способ кодирования столбца UserID при обучении DNN?
00
Вопрос или проблема Если у вас есть большое количество пользователей, скажем, 1 миллион, применение one-hot кодирования добавит 1M-1 размерность к исходному набору данных. Это выглядит очень неэффективно, но я не могу придумать другой способ кодирования userID.
Data Science
Как решить проблему с получением свободных портов в Pytorch DDP?
01
Вопрос или проблема Я сталкиваюсь с проблемами при получении свободного порта в блоке настройки DDP в PyTorch для параллелизации моей задачи обучения глубокому обучению на нескольких GPU в кластере HPC под управлением Linux. Я пытаюсь отправить задачу
Data Science
Существуют ли готовые веса модели для сегментации зданий на аэрофотоснимках?
00
Вопрос или проблема Я хотел бы протестировать некоторые техники глубокого обучения для извлечения контуров зданий из аэрофотоснимков. Я нашел много ссылок, связанных с этой проблемой (здесь, или здесь), но только с указанием архитектуры модели и процесса обучения.
Data Science
Изменение размеров изображений в наборе данных Malaria Tensorflow | Работа с нечистыми данными Tensorflow
00
Вопрос или проблема Я пытаюсь создать систему распознавания изображений на основе CNN для набора данных о малярии Tensorflow. Я загрузил набор данных (~27k RGB изображений) с использованием стандартного синтаксиса tensorflow_datasets.
Data Science
Как использовать теорию статистического обучения в реалном анализе
00
Вопрос или проблема Я начинаю этот пост с того, что не знаю, соответствует ли он правилам сообщества, поэтому прошу прощения за любые недоразумения. Я изучал теорию статистического обучения в университете. В частности, обучение PAC, размерность VC, равномерная сходимость и т.
Data Science
модель обнаружения объектов с несколькими примерами и активным обучением
00
Вопрос или проблема В этом видео https://youtu.be/60Sk-mq3Cr8, с 0 до 2:00 минут, упоминается модель обнаружения объектов, которая может обучаться на 10 образцах и улучшаться со временем. Какие существуют современные модели, которые могут добиться этого?
Data Science
Может ли сиамская модель, обученная с использованием евклидова расстояния в качестве метрики расстояния, использовать косинусное сходство во время вывода?
00
Вопрос или проблема Если у меня есть 3 встраивания Anchor, Positive, Negative из сиамской модели, обученной с использованием евклидового расстояния в качестве метрики расстояния для триплетной потери. Можно ли использовать косинусное сходство во время вывода?
Data Science
Интерпретация кривой обучения PPO, потери ценности, потери политики
00
Вопрос или проблема Мое обучение PPO для созданной гимнастической среды привело к следующему результату. Мне понадобятся советы о том, как интерпретировать результаты и с чего начать деятельность для улучшения. Большое спасибо за всю вашу поддержку!
Data Science
Как использовать ядро размера 5 на 5 или 7 на 7 для сети глубокого обучения с ядрами 3 на 3?
00
Вопрос или проблема Я использую архитектуру U-Net. Визуальная область сегментационной маски очень мала, и после обучения она дает много ложных срабатываний. Я думаю о том, чтобы изменить размер ядра с 3 на 3 на 5 на 5. Какие меры предосторожности мне
Data Science
Работа плотного слоя
00
Вопрос или проблема Какой тип операции выполняет полносвязный слой для уменьшения размерности. В основном, я использовал полносвязный слой для сжатия размерности всё время, например, от 10000 нейронов до 2000 нейронов или даже 10 нейронов на выходе.
Data Science
Проблемы с нахождением модели LSTM для классификации
00
Вопрос или проблема Я провожу исследование по классификации музыкальных жанров с использованием методов глубокого обучения. Работа состоит в том, чтобы сделать классификацию с использованием модели LSTM. Я использую GTZAN как набор данных и предварительно
Data Science
Как найти нейронные сеть ZOOs?
00
Вопрос или проблема Я слышал о термине “Зоопарки нейронных сетей”, которые предполагаются как хранилища, где есть множество предварительно обученных моделей нейронных сетей для различных приложений, но мне трудно их найти.
Data Science
Почему настройка гиперпараметров происходит на валидационном наборе данных, а не в самом начале?
00
Вопрос или проблема Несмотря на то, что я использовал его несколько раз, я все еще немного запутан в использовании набора валидации для настройки гиперпараметров. Насколько я могу судить, я выбираю модель, обучаю ее на обучающих данных, оцениваю производительность
Data Science
Прогнозировать значения переменных характеристик по временным меткам.
00
Вопрос или проблема У меня есть набор данных, который содержит временные метки и количество пользователей на этой временной метке. У каждого пользователя есть значения ресурсов, которые изменяются с каждым временным штампом. Как я могу предсказать количество