Data Science
Реализация обучения в PyTorch
00
Вопрос или проблема Я хочу выполнить следующую задачу в PyTorch – У меня есть набор данных COCO, где каждый образец данных используется для обучения YOLO v3. После обработки моделью образец должен быть удалён, если он удовлетворяет определённому условию.
Data Science
Вопрос переноса обучения: Расширение функциональности модели машинного обучения для многопозиценной оценки?
00
Вопрос или проблема Я экспериментировал с рядом различных моделей машинного обучения, используемых для оценки позы. Большинство из них выдают тепловую карту и смещения для обнаруженных человек(ов) на изображении. Мне действительно нравится производительность
Data Science
Снижает ли уменьшение потерь величину изменения во время обратного распространения?
00
Вопрос или проблема Если я сделаю loss = loss/10 перед вычислением градиента, повлияет ли это на величину изменения, применяемого к параметрам модели во время обратного распространения? Или величина изменения зависит только от направления градиента и скорости обучения?
Data Science
Как передать последовательность из 4 изображений в LSTM и CNN-LSTM
00
Вопрос или проблема Я получил задание и погрузился в изучение PyTorch, LSTM и CNN. Используя известную библиотеку MNIST, я беру комбинации из 4 чисел, и для каждой комбинации она попадает в одну из 7 меток. например: 1111 метка 1 (следует постоянной тенденции)
Data Science
Как правильно реализовать NNConv в Pytorch?
00
Вопрос или проблема Я попытался создать класс GNN, который может использовать мои признаки узлов вместе с признаками ребер графа. Я реализовал NNConv для использования признаков ребер, но не могу понять, что идет не так. В целом, набор данных имеет много
Data Science
Как создать ансамблевую модель для классификации с помощью pytorch, используя обученные модели?
00
Вопрос или проблема Я пытаюсь создать ансамблевую модель, состоящую из двух заранее обученных моделей, используя torch, чтобы классифицировать изображение. Ниже приведен некоторый код, основанный на этом посте. import timm import torch from torch.
Data Science
Динамический прямой проход в Pytorch
00
Вопрос или проблема Существует ли быстрый и удобный способ решения такой проблемы: class MyModule(nn.Module): def __init__(self): super(MyModule, self).__init__() self.linears = nn.ModuleList([nn.Linear(10, 20) for _ in range(10)]) def forward(self, x, indices): x = self.
Data Science
Принуждение переобучения на простой модели
00
Вопрос или проблема Я пытаюсь провести очень простой эксперимент. Я хочу выучить тригонометрическую функцию (скажем, $sin(x)$) в интервале $[-2\pi, 2\pi]$. Я хочу усложнить задачу, добавив шум в тренировочный набор: вместо того чтобы иметь только одну
Data Science
Объединить два тензора разной формы
00
Вопрос или проблема У меня есть два тензора: a.shape = (1, 30, 1220) # представляет вектор встраивания текста (30 интервалов, каждый с размером встраивания 1220) b.shape = (1, 128, 256) # представляет признаки изображения, полученные от предварительно
Data Science
Формы mat1 и mat2 в Pytorch не могут быть умножены (131072×12 и 64×32)
01
Вопрос или проблема У меня есть модель прогнозирования многомерного временного ряда, изначально использующая расширенную временную свертку для извлечения временных зависимостей, которую я пытался заменить на многоголовое самовнимание с остаточным соединением
Data Science
Помощь в улучшении предсказания временных рядов с использованием LSTM на PyTorch
00
Вопрос или проблема Итак, я пытаюсь использовать модель LSTM для прогнозирования данных температуры на PyTorch. Я относительно новичок как в PyTorch, так и в использовании рекурсивных сетей, поэтому я взял модель, которую нашел в интернете.
Data Science
Как решить проблему с получением свободных портов в Pytorch DDP?
01
Вопрос или проблема Я сталкиваюсь с проблемами при получении свободного порта в блоке настройки DDP в PyTorch для параллелизации моей задачи обучения глубокому обучению на нескольких GPU в кластере HPC под управлением Linux. Я пытаюсь отправить задачу
Data Science
Интерпретация кривой обучения PPO, потери ценности, потери политики
00
Вопрос или проблема Мое обучение PPO для созданной гимнастической среды привело к следующему результату. Мне понадобятся советы о том, как интерпретировать результаты и с чего начать деятельность для улучшения. Большое спасибо за всю вашу поддержку!
Data Science
Политический градиент – и автодифференциация (Pytorch/Tensorflow)
00
Вопрос или проблема В градиенте политики у нас есть нечто подобное: Правильно ли я понимаю, что если я применю логарифмическую кросс-энтропию к последнему слою, градиент будет автоматически рассчитан по формуле выше? Да, просто возьмите кросс-энтропийные
Data Science
Нужна помощь в создании диаграммы архитектуры нейронной сети для этой конкретной сети.
00
Вопрос или проблема Полный новичок в машинном обучении, но мне нужно опубликовать статью, это требование курса. Мне нужна помощь. Для этой реализации ResNet50 мне нужна схема архитектуры, которая выглядит так: Вот код: import torch import torch.
Data Science
Можно ли решить кубик Рубика с помощью DQN?
00
Вопрос или проблема Я пытаюсь решить кубик Рубика с помощью глубокого обучения и наткнулся на DQN, поэтому решил попробовать. Я разработал весь код и начал обучение, но получил такие результаты: Убытки растут, а тесты никогда не показывают лучших результатов.
Data Science
Как учитывается маскирование отступов в головах внимания трансформера?
00
Вопрос или проблема В чисто образовательных целях моя цель – реализовать базовую архитектуру Transformer с нуля. До сих пор я сосредоточился на энкодере для классификационных задач и предположил, что все образцы в пакете имеют одинаковую длину.
Data Science
странный подход к нейронным сетям
00
Вопрос или проблема Я работаю над проблемой, где мне нужно создать нейронную сеть для оптимизации рассадки 24 уникальных человек в сетке 6×4, минимизируя конфликты между соседними (вверх, вниз, вбок) людьми в этой сетке. Цель заключается в том, чтобы
Data Science
Тип ввода (MPSFloatType) и тип веса (torch.FloatTensor) должны быть одинаковыми.
00
Вопрос или проблема Я пытаюсь запустить этот ноутбук на Apple M1 (1-го поколения) с MacOS 12.4, замороженные библиотеки: >pip3 freeze anyio @ file:///private/tmp/jupyterlab--anyio-20211211-70040-1yv1wmx/anyio-3.4.0 appnope==0.
Data Science
RNN работает хуже, чем случайные угадывания на больших наборах данных.
00
Вопрос или проблема Я должен начать с того, что я здесь 100% новичок. Я обучал модель RNN на наборе данных из 30 классов с более чем 90000 образцов, и она достигла менее 2% точности. Обучив ту же модель на небольшом подмножестве тех же данных (только