Scale for evaluating food and nutrition education practices in Primary Health Care / Escala de avaliação de práticas de educação alimentar e nutricional na Atenção Primária em Saúde

ABSTRACT

ABSTRACT Objective To develop, validate and analyse intra- and inter-raters' agreement and reliability of a scale for the evaluation of food and nutrition education practices in primary health care. Methods Three theoretical references were used for the development of items with answers on a 4-point scale (not observed, partially/satisfactorily/fully observed) the Brazilian Dietary Guidelines, the Interprofessional Collaborative Practice and the Family Health Strategy as models for organizing primary health care. The scale was submitted for content and face panel validation and it was further reevaluated online. Thirty specialists used the scale for the rating of 4 videos produced for the study showing food and nutrition education practices in primary health care settings. Intra- and inter-raters agreement and reliability were analyzed by test at one time point and retest 30 days later. Results The scale initially included 72 items but was reduced to 17 items after content and face validation, together with a fill-out manual that was reviewed by experts. In the re-evaluation, all 17 items were maintained, and content adjustments were made in the manual. Thirty raters applied the scale to the videos in the test, and 28 in the retest. All videos obtained combined kappa values of >0.4. In the test-retest, 19 raters showed >80% agreement; in the inter-rater evaluation, 14 raters generated kappa values >0.75. Conclusion The scale underwent content and face validation and showed to be useful to diagnose the absence and the full addressing of the Brazilian Dietary Guidelines content with good intra- and inter-rater agreement and reliability in different settings of Primary Health Care.

RESUMO

RESUMO Objetivo Desenvolver e avaliar a validade e a confiabilidade de uma escala de avaliação das práticas de educação alimentar e nutricional na Atenção Primária em Saúde. Métodos Para o desenvolvimento dos itens, com quatro opções de resposta cada (não observado, parcialmente/satisfatoriamente/plenamente observado), foram utilizadas as recomendações de três referenciais teóricos - o Guia Alimentar para a População Brasileira, Prática Colaborativa Interprofissional e Estratégia Saúde da Família - como modelos de organização do cuidado na Atenção Primária. A escala passou por validação de conteúdo e aparente com painéis presenciais, sendo posteriormente reavaliada em plataforma online. Trinta especialistas aplicaram a escala na avaliação de quatro vídeos com encenações de práticas de educação alimentar e nutricional na Atenção Primária. Foram analisadas a concordância e a confiabilidade intra e interobservadores com teste e reteste após 30 dias. Resultados A escala foi desenvolvida com 72 itens, sendo reduzida a 17 itens após validação de conteúdo e aparente, acompanhados de manual de preenchimento revisado por especialistas. Na reavaliação, os 17 itens foram mantidos e o conteúdo do manual foi reajustado. Na avaliação dos vídeos, a escala foi aplicada por 30 avaliadores no teste e por 28 no reteste Todos os vídeos obtiveram kappas combinados >0,4. No teste-reteste, 19 avaliadores apresentaram concordâncias >80%; na avaliação interobservadores, 14 avaliadores apresentaram kappas >0,75. Conclusão A escala passou por validação de conteúdo e aparente e mostrou-se adequada para diagnosticar a ausência e a abordagem plena dos conteúdos do Guia Alimentar, com boa concordância e confiabilidade intra e interobservadores em diversas situações de cuidado na Atenção Primária.