RESUMO
BACKGROUND: The application of cell phones, similar portable devices (ie, tablets), apps, the internet, and GPS in evaluation have established new ways of collecting, storing, retrieving, transmitting, and processing data or information. However, evidence is incipient as to which technological resources remain at the center of assessment practice and the factors that promote their use by the assessment community. OBJECTIVE: This study aimed to analyze the relationship between the use of the National Program for Improving Primary Healthcare Access and Quality's (PMAQ-AB; Programa Nacional de Melhoria do Acesso e da Qualidade da Atenção Básica) mobile app and management system and the external evaluation quality of Brazil's PMAQ-AB. METHODS: We conducted a qualitative case study during the external evaluation of Brazil's PMAQ-AB. Data collection consisted of interviews, focus groups, and document analysis. A total of 7 members from the Department of Primary Care of the Ministry of Health and 47 researchers from various higher education and research institutions across the country participated in the study. Data were categorized using the ATLAS.ti software program, according to the quality standards of the Joint Committee on Standards for Educational Evaluation, following the content analysis approach by Bardin. RESULTS: The results related to feasibility, thematic scope, field activity management, standardized data collection, data consistency, and transparency. They demonstrated improvements and opportunities for advancements in evaluation mediated by the use of information technology (IT), favored the emergence of new practices and remodeling of existing ones, and took into account the multiple components required by the complex assessment of access and quality in primary health care. Difficulties in technology operation, inoperative systems, and lack of investment in equipment and human resources posed challenges to increasing the effectiveness of IT in evaluation. CONCLUSIONS: The use of technology-based tools-the app and the management system-during the external evaluation offered evaluators a greater opportunity for stakeholder engagement. This also allowed the insertion of different organizational, operational, and methodological components that are capable of triggering influences and confluences. In addition, this allowed connections in collaborative and synergistic networks to increase the quality and allow the development of a more consistent and efficient evaluation process with greater possibility of incorporating the results into public health policies.
RESUMO
Apesar da ascendência de avaliações na Atenção Primária à Saúde, com possibilidades para o desenvolvimento de meta-avaliações, bem como, o incremento de investimentos e acesso às Tecnologias da Informação, com aumento de sua aplicabilidade em processos avaliativos, principalmente, para a coleta de dados e disseminação dos resultados, até o momento, são incipientes estudos meta-avaliativos que evidenciem as consequências das relações que se estabelecem entre as tecnologias e os avaliadores na qualidade da avaliação. Utilizando a Scoping Review, o Estudo de Caso e a estrutura conceitual da sociomaterialidade, esta tese procurou contribuir para este campo de pesquisa e para as práticas avaliativas, avaliando a incorporação da Tecnologia da Informação na avaliação da Atenção Primária à Saúde no Brasil considerando os padrões internacionais de qualidade. A Scoping Review teve o objetivo de mapear os usos da meta-avaliação dos estudos avaliativos desenvolvidos na Atenção Primária à Saúde. Foram incluídos 23 estudos, publicados entre 1999 e 2018, predominantemente realizados no Brasil. Tiveram mais ênfase as meta-avaliações somativas, com foco em programas de saúde e na gestão da Atenção Primária, que utilizaram como padrões avaliativos os recomendados pelo Joint Committeeon Standards for Educational Evaluation. O Estudo de Caso teve abordagem qualitativa. Participaram 07 técnicos da coordenação do Ministério da Saúde e 47 pesquisadores de Instituições de Ensino e Pesquisa, com uma amostra total de54 participantes. A coleta de dados ocorreu entre julho de 2018 a julho de 2019, utilizaram-se entrevistas, grupos focais e análise documental. Os dados foram categorizados por padrões de qualidade com uso do software Atlas ti, seguido de análise de conteúdo de Bardin. Para o estudo de caso sobre coleta de dados, os resultados evidenciaram que a tecnologia viabilizou a realização da avaliação em todo território nacional; contribuiu para a operacionalização de uma avaliação com grande escopo temático; forneceu recursos para a gestão da atividade de campo; minimizou erros, agilizou e homogeneizou a coleta; garantiu a integralidade das informações necessárias com o mínimo de inconsistência, permitindo o alcance de resultados uteis e válidos para certificação das equipes, políticas de saúde e pesquisas. Além disto, fatores como dificuldade de manuseio, inoperância do sistema e falta de investimentos em equipamentos e recursos humanos podem representar possíveis restrições para a eficiência da aplicação da tecnologia na avaliação. Quanto ao estudo sobre disseminação dos resultados, constaram-se avanços na visualização dos dados e na implementação de iniciativas de dados abertos, possibilitando sua disponibilidade para profissionais, formuladores de políticas e universidades. Desafios relacionados ao tempo de entrega dos relatórios, restrição de acesso, referência à falta de interesse e habilidades digitais, influenciaram no alcance dos objetivos esperados pelo proponente da avaliação. Considera-se que a incorporação da Tecnologia da Informação tem potencial ao alcance de padrões de qualidade, oportunizando a implementação de avaliações mais eficazes, com a produção de melhores resultados, atuando construtivamente no processo de melhorias de desempenho das equipes de saúde e da gestão, induzindo a redefinição dos seus processos prioritários de trabalho, com vistas ao aprimoramento e fortalecimento da Atenção Primária à Saúde (AU).
Despite the ascendancy of evaluations in Primary Health Care, with possibilities for the development of meta-evaluations, as well as the increase in investments and access to Information Technologies, with an increase in its applicability in evaluation processes, mainly for the collection of data and dissemination of results, so far, are incipient meta-evaluative studies that show the consequences of the relationships established between technologies and evaluators in the quality of the assessment. Using the Scoping Review, the Case Study, and the conceptual structure of sociomateriality, this thesis sought to contribute to this field of research and evaluative practices, evaluating the incorporation of Information Technology in the evaluation of Primary Health Care in Brazil considering international quality standards. The scoping review was developed following the Joanna Briggs Institute manual to map the uses of the meta-evaluation of evaluative studies carried out in Primary Health Care. 23 studies, published between 1999 and 2018, predominantly carried out in Brazil, were included. There was more emphasis on summative meta-evaluations, with a focus on health programs and on the management of Primary Care, which used as evaluative standards those recommended by the Joint Committee on Standards for Educational Evaluation. The Case Study had a qualitative approach. 07 technicians from the coordination of the Ministry of Health and 47 researchers from Education and Research Institutions participated, with a total sample of 54 participants. Data collection took place between July 2018 and July 2019, using interviews, focus groups, and document analysis. Data were categorized by quality standards using the Atlas ti software followed by Bardin's content analysis. For the case study on data collection, the results showed that the technology made it possible to assess the national territory; contributed to the operationalization of an assessment with a large thematic scope; provided resources for field activity management; minimized errors, streamlined and homogenized the collection; ensured the completeness of the necessary information with a minimum of inconsistency, allowing the achievement of useful and valid results for the certification of teams, health policies and research. In addition, factors such as difficulty in handling, inoperability of the system, and lack of investment in equipment and human resources can represent possible restrictions for the efficiency of the application of technology in the assessment. As for the study on the dissemination of results, advances were found in data visualization and the implementation of open data initiatives, enabling its availability to professionals, policymakers and universities. Challenges related to reporting delivery time, access restriction, reference to lack of interest, and digital skills influenced the achievement of the objectives expected by the evaluation proponent. It is considered that the incorporation of Information Technology has the potential to reach quality standards, providing opportunities for the implementation of more effective assessments, with the production of better results, acting constructively in the process of improving the performance of health and management teams, inducing the redefinition of its priority work processes, to improve and strengthen Primary Health Care (AU).
Assuntos
Atenção Primária à Saúde , Avaliação em Saúde , Indicadores de Qualidade em Assistência à Saúde , Estudo de Avaliação , Tecnologia da Informação , Grupos Focais/métodos , Análise Documental , Política de SaúdeRESUMO
RESUMO O objetivo deste estudo foi avaliar a utilidade da Avaliação Externa do Programa Nacional de Melhoria do Acesso e da Qualidade da Atenção Básica, considerado uma inovação. Trata-se de pesquisa avaliativa da Avaliação Externa do PMAQ-AB na percepção de sujeitos que vivenciaram a condução dessa avaliação por meio de estudo de caso qualitativo. Os dados foram coletados por meio de entrevista semiestruturada e de grupo focal on-line, e analisados por meio da análise de conteúdo de Bardin. Observou-se envolvimento dos interessados com pactuação em diferentes esferas da gestão nacional, envolvimento processual entre Departamento de Atenção Básica e Instituições de Ensino e Pesquisa, abrangência nacional facilitada com recurso de Tecnologia da Informação, negociação da logística in loco com gestores municipais. Verificou-se credibilidade científica dos avaliadores; a relação entre gestor nacional e instituições de pesquisa não se mostrou conflituosa; as instituições desvelaram conflitos entre gestores e Equipes de Atenção Básica sobre destinação dos recursos provenientes do PMAQ. Constatou-se grande escopo das informações sobre estrutura, processos e resultados; capilaridade e acesso aos resultados. Conclui-se que, na ótica dos participantes do estudo, a Avaliação Externa mostrou-se inovadora e útil à indução da melhoria da qualidade da Atenção Básica.(AU)
ABSTRACT The objective of this study was to evaluate the utility of the External Evaluation of the Brasil's National Program for Improvement Access and Quality in Primary Health Care, considered an innovation. It is an evaluation study of the External Evaluation of the PMAQ-AB in the perception of subjects who experienced the conduction of this evaluation through a qualitative case study. The data were collected through a semi-structured interview and the online focal group, and analyzed through the Bardin content analysis. It was observed the involvement of stakeholders with different national management spheres, procedural involvement between the Department of Primary Care and Teaching and Research Institutions, national coverage facilitated with Information Technology resources, negotiation of logistics in loco with municipal managers. Scientific credibility of the evaluators was observed; the relationship between national managers and research institutions did not appear to be conflicting; the institutions uncovered conflicts between managers and Primary Care Teams about the allocation of resources to management. A large scope of information on structure, processes, and results was found; capillarity and access to results. It is concluded that from the perspective of the participants of the study, the External Evaluation proved to be innovative and useful to induce the improvement of the quality of Primary Care.(AU)
Assuntos
Atenção Primária à Saúde/normas , Avaliação em Saúde , Avaliação de Programas e Projetos de Saúde , Pesquisa QualitativaRESUMO
In Brazil, the accidents and urban violence, the external causes, build a public health problem that has taken big proportions and transcendence, with a big impact on the population's lives. In the set of injuries resulting from external causes, the Traumatic brain injury (TBI) stands out in terms of magnitude, both among dead and injured, being one of the most frequent injuries. Thus, it is important to know epidemiological profile of traumatic brain injury victims, local characteristics, in order to take more effective prevention actions based on this reality, since the primary causes of TBI can vary according to the people involved. The objective of this study was to know the epidemiological profile of traumatic brain injury victims, the type of causative event and the severity of the trauma. Exploratory, crosssectional, quantitative and descriptive research, conducted with 372 patients suffering from traumatic brain injury. Data were collected from form itself, semi-structured form, and analyzed using the SPSS 20.0 software. The research had the project approved by the Research Ethics Committee, CAAE 30487514.6.0000.5568. There was a predominance of males, aged 18-30 years. The cause of the most common brain injury was traffic accident with a prevalence of moderate traumatic brain injury. It is necessary to the development of preventive actions as well as the development of public policies that contribute to the reduction of morbidity and mortality from TEC and qualified assistance to victims.
No Brasil, os acidentes e a violência urbana, ou seja, as causas externas configuram um problema de saúde pública que tem tomado grandes proporções e transcendência, com forte impacto na vida da população. No conjunto de lesões decorrentes das causas externas, o Traumatismo Cranioencefálico (TCE) destaca-se em termos de magnitude, tanto entre mortos quanto em feridos, sendo uma das lesões mais frequentes. Assim, é de fundamental importância o conhecimento do perfil epidemiológico das vítimas das de traumatismo cranioencefálico, as características locais, para que sejam, então, adotadas medidas de prevenção mais efetivas baseadas nessa realidade, uma vez que as causas primárias do TCE variam de acordo com a população envolvida. O estudo pretende conhecer o perfil epidemiológico das vítimas de traumatismo cranioencefálico, o tipo de evento causador e a gravidade do trauma. Pesquisa exploratória, transversal, quantitativa e descritiva, realizada com 372 pacientes vítimas de traumatismo cranioencefálico. Os dados foram coletados a partir de formulário próprio, semiestruturado, e analisados por meio do software SPSS 20.0. A pesquisa teve o projeto aprovado pelo Comitê de Ética em Pesquisa, CAAE 30487514.6.0000.5568. Houve predomínio do sexo masculino, na faixa etária de 18 a 30 anos. A causa do traumatismo cranioencefálico mais frequente foi a de acidentes de trânsito, havendo predomínio do traumatismo cranioencefálico moderado. Faz-se necessário o planejamento de ações preventivas, bem como o desenvolvimento de políticas públicas que contribuam com a diminuição da morbimortalidade por traumatismo cranioencefálico e com o atendimento qualificado às vítimas.