Data Science
RNN работает хуже, чем случайные угадывания на больших наборах данных.
00
Вопрос или проблема Я должен начать с того, что я здесь 100% новичок. Я обучал модель RNN на наборе данных из 30 классов с более чем 90000 образцов, и она достигла менее 2% точности. Обучив ту же модель на небольшом подмножестве тех же данных (только
Data Science
Анализ настроений на основе аспектов с использованием Bert и Pytorch
00
Вопрос или проблема У меня есть набор данных онлайн-отзывов (X) с соответствующими темами (тема1 до тема5), и каждая тема может иметь 5 значений (подробная оценка настроений от 1 до 5). Итак, у меня есть один X и 5 Y колонок. Я хотел бы узнать, как я
Data Science
Градиентный вывод через пользовательскую функцию потерь
00
Вопрос или проблема Я совершенно нов в Pytorch (и в машинном обучении в целом), поэтому мне трудно понять, что происходит в отношении настраиваемой функции потерь, которую я рассматриваю. Я понимаю, что происходит в функции, но мне нужно понять, как рассчитывается
Data Science
Комбинирование различных признаков в качестве входных данных для нейронной сети
00
Вопрос или проблема Я использую два разных источника информации как входные данные для своей нейронной модели. Модель принимает слово в качестве ввода и производит бинарный [1/0] выход. Я представляю каждое слово, используя его векторное представление
Data Science
Обновление среднего значения и дисперсии весов
00
Вопрос или проблема Я пытаюсь понять алгоритм Байес по обратному распространению из статьи Неопределенность весов в нейронных сетях, идея заключается в том, чтобы создать нейронную сеть, в которой каждый вес имеет собственное распределение вероятностей.
Data Science
Какой подходящий хранилище данных для последовательных данных переменной длины для использования в PyTorch?
00
Вопрос или проблема У меня есть большое количество последовательностей – потенциально сотни тысяч – каждая из которых состоит из 100 до 10 000 элементов, которые, в свою очередь, состоят примерно из 5 вещественных чисел.
Data Science
Как я могу загрузить пользовательские данные в загрузчик данных (pytorch)
00
Вопрос или проблема Примечание: Я извлек кадр для всех видео и сохранил его в папке с тем же именем, что и видео train_data, class, video —> Это папки img –> это jpg файлы, так что у каждого класса много видео, я извлек изображение для
Data Science
Целевой и выходной формат/тип для бинарной классификации с использованием PyTorch
00
Вопрос или проблема У меня есть несколько аннотированных изображений, которые я хочу использовать для обучения бинарного классификатора изображений, но у меня возникли проблемы с созданием набора данных и фактическим обучением модели.
Data Science
Как визуализировать модель PyTorch без параметров ввода?
00
Вопрос или проблема Я работаю над проектом, который сильно зависит от манипуляций с вычислительными графами, но не относится напрямую к области машинного обучения. Тем не менее, мы используем PyTorch из-за его гибкости и поддержки динамических вычислительных графов.
Вопросы и ответы
Как конвертировать сегментацию pytorch в CoreML
00
Вопрос или проблема Скрипт получает модель DeepLabV3 + MobileNet с pytorch. Затем он сохраняет её в .pt, который можно открыть в Netron. Затем он конвертирует её в .mlpackage, который нельзя открыть в Netron – возникает ошибка, сообщающая “
Data Science
Сохранение скрытых слоёв обученной сети
00
Вопрос или проблема Я использовал предобученную модель VGG-19 для создания классификатора изображений в рамках MOOC. Я реализовал классификатор следующим образом: classifier = nn.Sequential(nn.Linear(25088, 512), nn.ReLU(), nn.
Data Science
Как отключить предупреждение libtorch
00
Вопрос или проблема Недавно я развернул программу, используя libtorch (C++ API для PyTorch). Программа работала как ожидалось, но выдала предупреждение. Предупреждение: Веса модуля RNN не являются частью единого непрерывного блока памяти.
Вопросы и ответы
std::bad_alloc ошибка при связывании библиотек PyTorch в Google Test
00
Вопрос или проблема Я работаю над проектом на C++, который использует PyTorch, и пытаюсь настроить модульные тесты с помощью Google Test. Однако я сталкиваюсь с проблемой, когда при связывании библиотек PyTorch с моим тестовым исполняемым файлом возникает ошибка std::bad_alloc.
Data Science
Нормализация батчей для нескольких наборов данных?
00
Вопрос или проблема Я работаю над задачей генерации синтетических данных, чтобы помочь обучению моей модели. Это означает, что обучение проводится на синтетических + реальных данных, а тестирование — на реальных данных. Мне сказали, что слои пакетной
Data Science
Могу ли я использовать выход с one-hot кодированием для сегментации в Pytorch с использованием фокальной и Dice потерь?
00
Вопрос или проблема Знайте, что для классификации с использованием нейронной сети и функции потерь CrossEntropy нам нужен выход в формате one-hot, но в PyTorch функция потерь CrossEntropy не принимает целевые данные в формате one-hot, и мы должны предоставить
Data Science
Политический градиент не “обучается”
00
Вопрос или проблема Я пытаюсь реализовать метод градиента политики из книги “Практическое машинное обучение” автора Жерона, который можно найти здесь. В блокноте используется Tensorflow, а я пытаюсь сделать это с помощью PyTorch.
Data Science
Мобильные модели Word2vec
00
Вопрос или проблема Скажите мне, есть ли w2v модели, которые не требуют словаря. Все, что я нашел в torchtext, сначала хочет узнать словарь build_vocab. Но если у меня есть огромный объем текста, я хотел бы иметь модель, которая работает на уровне фраз.
Вопросы и ответы
Ошибки при развертывании модели PyTorch Lightning в AWS SageMaker TrainingJobs: SMDDP не поддерживает ReduceOp.
00
Вопрос или проблема Я пытаюсь следовать рекомендациям DDP (Distributed Data Parallel) (Руководство 1, Руководство 2) и развернуть свои модели глубокого обучения на AWS SageMaker. Тем не менее, при запуске я сталкиваюсь со следующей ошибкой.
Data Science
Какой алгоритм можно использовать для уменьшения размерности нескольких временных рядов?
00
Вопрос или проблема В моем наборе данных, точка данных по сути представляет собой временной ряд из 6 характеристик за год по месяцам, так что в итоге получается 6*12=72 характеристики. Мне нужно найти классовые выбросы, поэтому я выполняю сокращение размерности
Data Science
Использование ResNet50 с SE-блоком на несбалансированных данных – pytorch
00
Вопрос или проблема Я работал с набором данных ультразвуковых изображений рака груди, содержащим 432 доброкачественных случаев, 210 злокачественных случаев и 133 нормальных случаев. Сначала я использовал предобученную модель ResNet-50, которая дала следующие