Calculadora de taxa de aprendizagem
Calcule a taxa de aprendizagem final após aplicar cronogramas de decaimento escalonado, exponencial ou cosseno.
Como usar a calculadora da taxa de aprendizagem
- Insira sua taxa de aprendizagem inicial.
- Insira o número de épocas de treinamento.
- Selecione o tipo de decaimento.
- Clique em Calcular para ver a taxa de aprendizagem final e o cronograma.
Casos de Uso
- •Planejando cronogramas de hiperparâmetros para treinamento de aprendizado profundo.
- •Comparando estratégias de decaimento para velocidade de convergência.
- •Documentando configurações de treinamento em experimentos de ML.
- •Ensinando conceitos de otimização de redes neurais.
Fórmula
Etapa: lr = lr0 × 0,1^floor(época/30).
Perguntas Frequentes
O que é um cronograma de taxa de aprendizagem?
Um cronograma de taxa de aprendizagem reduz a taxa de aprendizagem ao longo do tempo para ajudar o modelo a convergir para um mínimo melhor.
Qual tipo de decaimento devo usar?
O recozimento de cosseno é popular para aprendizado profundo;
Qual é uma taxa de aprendizagem inicial típica?
Os valores comuns variam de 0,0001 a 0,01 dependendo do otimizador e da arquitetura do modelo.