Data Science
Обеспечьте сбалансированные батчи классов при настройке гиперпараметров моделей keras с помощью перебора по сетке.
00
Вопрос или проблема Обеспечение сбалансированных классов в пакетах во время обучения моделей keras возможно с использованием метода fit_generator. Я использовал imblearn.keras.BalancedBatchGenerator для этого, и это работает хорошо!
Вопросы и ответы
матрица путаницы, отображающая только одну сторону для модели предсказания – CNN
00
Вопрос или проблема У меня проблема с матрицей для отображения предсказанных меток для бинарного вывода текстовой классификации. Она показывает, что все предсказания попадают под один класс и не отображает предсказание для класса 1.
Data Science
Некоторые методы увеличения данных мешают модели Unet обучаться.
00
Вопрос или проблема Я тренирую модель Unet для сегментации клеток на изображениях микроскопии. Чтобы помочь модели лучше обобщать данные с разных микроскопов, я попытался применить увеличение яркости к обучающим данным, случайным образом умножая изображения
Data Science
Можем ли мы предсказать признаки из меток в машинном обучении?
00
Вопрос или проблема Учитывая набор данных с 100 наблюдениями и 3 признаками плюс одна метка (регрессия), мы обучаем модель на данных 100 * 4 (3 признака + 1 метка). Теперь можем ли мы предсказать признаки, когда метка задана в качестве входных данных.
Вопросы и ответы
Ошибки при развертывании модели PyTorch Lightning в AWS SageMaker TrainingJobs: SMDDP не поддерживает ReduceOp.
00
Вопрос или проблема Я пытаюсь следовать рекомендациям DDP (Distributed Data Parallel) (Руководство 1, Руководство 2) и развернуть свои модели глубокого обучения на AWS SageMaker. Тем не менее, при запуске я сталкиваюсь со следующей ошибкой.
Data Science
Поиск последовательностей комбинаций, которые наиболее сильно влияют на целевую переменную.
00
Вопрос или проблема Можно создать модель временного ряда для прогнозирования целевой переменной. Мне нужно найти комбинации и последовательности входных данных, которые оказывают наибольшее влияние на целевую переменную. В данном случае входные данные
Data Science
Использование ResNet50 с SE-блоком на несбалансированных данных – pytorch
00
Вопрос или проблема Я работал с набором данных ультразвуковых изображений рака груди, содержащим 432 доброкачественных случаев, 210 злокачественных случаев и 133 нормальных случаев. Сначала я использовал предобученную модель ResNet-50, которая дала следующие
Data Science
Ошибка после объединения двух моделей глубокого обучения VGG16 и ResNet50
00
Вопрос или проблема Я объединил две разные модели, а именно VGG16 и ResNet50, и использовал выходы этих двух моделей в качестве входных данных для другой модели. Я проверил график слоев и все верно. Перед объединением код работал безупречно и выдавал правильные результаты.
Data Science
как использовать графики tensorflow в многопоточности? ошибка значений: тензор a должен принадлежать тому же графику, что и тензор b!
00
Вопрос или проблема Я выполняю задачу обнаружения экземпляров и извлечения изображений с помощью Keras и Tensorflow в качестве бэкенда. Я планирую использовать многопоточность для загрузки двух моделей, загружая maskrcnn в одном потоке и mobile net в другом.
Data Science
Помощь с глубоким обучением для инспекции мотоциклов
00
Вопрос или проблема Прежде всего, я очень нов в машинном обучении иData science, поэтому мне очень жаль, если мой вопрос совершенно глупый. Я проходил стажировку в области машинного зрения, и люди в моем офисе хотят, чтобы я реализовал модель глубокого
Data Science
Как улучшить точность в следующем коде?
00
Вопрос или проблема Я имею около 43 различных категорий изображений дорожных знаков. Если я использую небольшие данные из 3 категорий, максимальная точность, которую я получаю, составляет около 65%, и я пробовал много различных значений слоев, а также
Data Science
Как использовать несколько адаптеров с предобученной моделью в Hugging Face Transformers для вывода?
00
Вопрос или проблема У меня есть предобученная модель Llama-2 в директории models_hf и два адаптера с дообучением: адаптер для обобщения в ./tmp/llama-output и чат-адаптер в ./tmp/chat_adapter. Подробности кода находятся в другом вопросе.
Data Science
Что означает ‘v’ в GoogLeNet?
00
Вопрос или проблема В GoogLeNet (по этой ссылке) есть обозначение ‘v’ на рисунке 3, как ‘1X1+1(v)’. Я не знаю, что означает ‘v’. Кроме того, я понял ‘s’ как шаг. Но я не знаю, почему в ‘
Data Science
Убыток не уменьшается.
00
Вопрос или проблема Я строю проект на основе генерации текста с использованием архитектуры трансформера. Я использовал токенизатор Huggingface для токенизации, мой набор данных – daily-dialog, а архитектура моей модели следующая: class languageModel(nn.
Data Science
Использование ImageNet в Keras?
00
Вопрос или проблема Керас упоминает, что предоставил модели, предобученные на ImageNet. Однако не уточняется, что они имеют в виду под “ImageNet” – имеется ли в виду определённый поднабор ImageNet из полного набора изображений?
Data Science
NN быстро сходится, но является ли это проблемой, если производительность хороша на тестовом наборе?
00
Вопрос или проблема У меня есть модель LSTM, которую я использую для прогнозирования временных рядов. В процессе обучения она сходится уже после 3 эпох. Модель показывает довольно хорошие результаты на тестовых данных, но стоит ли мне по-прежнему беспокоиться
Data Science
Как мне подавать данные в мою модель Keras партиями?
00
Вопрос или проблема Я пытаюсь подать последовательную модель по батчам. Для воспроизводимости моего примера предположим, что мои данные следующие: X=np.random.rand(24,432) Y=np.random.rand(24,432) Моя цель – подавать модель по батчам.
Data Science
Обучение макета страницы документа и классификация хороших/плохих макетов
00
Вопрос или проблема У меня есть случай использования, в котором мне нужно получить координаты каждого блочного элемента на странице (будь то параграф, изображение, таблица), где я обучаю модель, чтобы понять, как они располагаются на данной странице
Data Science
Как мы можем создать детектор метки и значения?
00
Вопрос или проблема Я пытаюсь реализовать детектор текста с использованием MaskRCNN, чтобы модель могла обнаруживать метку и значение, как показано на изображении ниже. Обнаружить это легче для таких полей, как дата страницы и номер заказа, но не удается
Data Science
Поиск рекомендаций по моделированию ограниченных входных данных для коррекции влажности почвы с использованием данных наблюдений за осадками
00
Вопрос или проблема Я погружен в тонкости работы с 2D моделируемыми полями (изображениями), представляющими влажность почвы в регионах, где, к сожалению, отсутствуют прямые наблюдения. Однако есть и положительная сторона — у меня есть данные наблюдений