Eles usaram o relu como uma função de ativação para esse problema.
O ReLU (Rectified Linear Unit) é uma função de ativação simples e eficaz, que mapeia todos os valores negativos para zero e mantém os valores positivos inalterados. Isso ajuda a evitar o problema do "dying ReLU", onde a função de at