Proyectos
Ver en GitHub
alphadl/lookahead.pytorch
alphadl/lookahead.pytorch has 336 GitHub stars and 61 forks. GitHot measured 0 stars in 24 hours. Last checked 2026-11-21 19:58 UTC. Last push 2019-08-09.
Crecimiento de estrellas medido
- in 24h
- 0
- in 7 days
- Recopilando historial
- in 15 days
- Recopilando historial
- in 1 month
- Recopilando historial
Cambios netos en períodos que se solapan, no totales diarios. Los datos no disponibles se dejan en blanco. Las estrellas indican interés, no calidad.
Acerca de
lookahead optimizer (Lookahead Optimizer: k steps forward, 1 step back) for pytorch
Aprendizaje automáticoREADME.md
Originallookahead optimizer for pytorch
PyTorch implement of Lookahead Optimizer: k steps forward, 1 step back
Usage:
base_opt = torch.optim.Adam(model.parameters(), lr=1e-3, betas=(0.9, 0.999)) # Any optimizer
lookahead = Lookahead(base_opt, k=5, alpha=0.5) # Initialize Lookahead
lookahead.zero_grad()
loss_function(model(input), target).backward() # Self-defined loss function
lookahead.step()
lookahead优化器的PyTorch实现
论文《Lookahead Optimizer: k steps forward, 1 step back》的PyTorch实现。
用法:
base_opt = torch.optim.Adam(model.parameters(), lr=1e-3, betas=(0.9, 0.999)) # 用你想用的优化器
lookahead = Lookahead(base_opt, k=5, alpha=0.5) # 初始化Lookahead
lookahead.zero_grad()
loss_function(model(input), target).backward() # 自定义的损失函数
lookahead.step()
中文介绍:https://mp.weixin.qq.com/s/3J-28xd0pyToSy8zzKs1RA

Explorar proyectos relacionados
Cargando…