Вычисление градиента

10.10.2024, 10:54. Показов 710. Ответов 0

Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам

Добрый день. У меня есть код, который вычисляет градиентный спуск. Сама функция находится внизу, в файле. Мне нужно,чтобы в конечном итоге потери стремились к нулю, но у меня никак не выходит это. Написание кода используется с помощью PyTorch. Помогите решить проблему, пожалуйста

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
import torch
import torch.nn as nn
 
def forward(x,w):
    a = (torch.cos(3 - x) - 2 * torch.exp(x - 3))
    b = (torch.sin(1 - (x / 3)) + 2 * torch.log1p(3 * x))
    return (a / b) * (5 - x) * w
 
X = torch.tensor([1,2,3,4], dtype=torch.float32)
y = torch.tensor([2,4,6,8], dtype=torch.float32)
 
l_rate = 0.1
n_iters = 100
 
w = torch.tensor(1, dtype=torch.float32, requires_grad=True)
 
loss = nn.MSELoss()
optimizer = torch.optim.SGD([w], lr=l_rate)
 
res = []
for epoch in range(n_iters):
    y_pred = forward(X,w)
    l = loss(y, y_pred)
    res.append(l.item())
    optimizer.zero_grad()
    l.backward()
    optimizer.step()
    
    if epoch % 10 == 9:
        print(f"эпоха={epoch + 1}: веса={w.item():.3f}, потери={l.item():.3f}")

Вложения

вычисение градиента.docx (14.4 Кб, 8 просмотров)

cpp_developer

Эксперт

20123 / 5690 / 1417

Регистрация: 09.04.2010

Сообщений: 22,546

Блог

10.10.2024, 10:54

Ответы с готовыми решениями:

Методы проекции градиента на питоне
Искал реализацию одного из методов проекции градиента на питоне, но смог найти лишь градиентный спуск (он не подходит, т.к. нужен метод, в...

XGboost custom objective MAE расчет градиента и гессиана
Пытаюсь создать собственный объект Mean Abs Error для XGboost вместо штатного Squared Error 'objective': 'reg:squarederror' Вот мой...

вычисление градиента по softmax
в примере объясняющем линейный классификатор вычисляется градиент по формуле: dL/dZ = (Softmax - 1(y)) / N я не могу понять...

Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.

raxper

Эксперт

30234 / 6612 / 1498

Регистрация: 28.12.2010

Сообщений: 21,154

Блог

10.10.2024, 10:54

Помогаю со студенческими работами здесь

Вычисление градиента функции в пространстве
Есть функция, представленная точками в пространстве. Значение функции в каждой точке равно расстоянию от начала координат до этой точки....

Вычисление производной и градиента функции в численных методах
Здравствуйте! Подскажите пожалуйста, где можно прочитать про вычисление производной и градиента функции в численных методах. Дана функция...

Методы: условного градиента, проекции градиента, возможных направлений
Помогите плиз с кодом. метод условного градиента метод проекции градиента метод возможных направлений

Смена градиента
На форме 5 Image, в них часто (1 раз в 2с.) меняется картинка (размер: 33x60), как лучше менять её? Каждый раз загружать из файла...

Метод градиента
Всем здрасте. Люди помогите пожалуйста в решении системы линейных уравнений методом скорейшего спуска. Система : х1 + х2 + х3 = 0 ...

Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:

Новые блоги и статьи Все статьи Все блоги /
PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Access VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 16.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .

Наверх