A avaliação de programas educacionais por meio de métodos científicos válidos e reconhecidos é atividade recente, que pode contemplar o uso de diferentes tipos de análises. Esta pesquisa teve por objetivo avaliar um programa de educação permanente desenvolvido para profissionais de enfermagem no contexto hospitalar. Trata-se de uma pesquisa avaliativa com abordagem quantitativa sustentada por três tipos de análises: estratégica, lógica e dos efeitos. Para tanto, foram percorridas quatro fases: elaboração do modelo lógico do programa de educação permanente em enfermagem; aplicação de instrumentos de medida com 147 profissionais de enfermagem e 24 supervisores e/ou chefias de enfermagem para avaliação do efeito deste programa; validação do modelo lógico por 12 membros da Comissão de Educação Permanente em Enfermagem do local da pesquisa; e, por fim, realização das análises propostas nesta pesquisa. Quanto às análises estratégica e lógica, é possível inferir que há validação em relação à pertinência do problema focalizado e os objetivos propostos pelo Programa de Educação Permanente em Enfermagem. Assim como, configura-se em uma intervenção complexa que, apesar de apresentar uma estrutura organizada para alcance dos resultados, ainda é insuficiente para a consolidação deste programa no cenário da pesquisa. Para tanto, requer fortalecimento nas decisões relacionadas ao desenho educacional, gestão educativa e avaliação do programa, a fim de que se torne um sistema integrado de ações educativas sob a lógica da proposta da Educação Permanente em Saúde. No que se refere à análise dos efeitos, o programa produz impacto positivo em amplitude, tanto na auto (profissionais de enfermagem) como na heteroavaliação (supervisores e chefias de enfermagem), ou seja, ocorre transferência dos conhecimentos, habilidades e atitudes apreendidos nas ações educativas, refletidos no desempenho, na motivação e nas atitudes dos profissionais de enfermagem no contexto do trabalho. Conclui-se que são necessárias mudanças na estrutura do programa que permitam problematizar o processo e apontar caminhos no sentido de reconduzir as práticas das ações educativas com vistas à retroalimentação e, por conseguinte, ao seu aperfeiçoamento, a partir da definição de indicadores que permitam aferir o seu desempenho quanto aos resultados intermediários.