A demanda por procedimentos médicos gerados pela transformação dos perfis etários e de morbi-mortalidade das populações tem forçado uma escalada contínua dos custos da assistência que atingem limites críticos em relação à disponibilidade de recursos. É neste contexto onde a priorização é a regra e o desperdício inaceitável, que métodos de otimização vem sendo desenvolvidos, dentre eles o “Audit and feedback”. De um total de 176 médicos de uma regional de cooperativa, 130 constituíram a amostra para estudo Quase-experimento com total de dois anos de seguimento (2004- 2005). As informações tratavam do “Índice de Solicitações de Serviços Auxiliares de Diagnose e Terapia” (Is SADT) e eram fornecidas de modo que cada profissional sabia qual era a sua posição dentro do grupo da mesma especialidade, mas não tinha condições de identificar os demais. Apesar do número absoluto de SADT realizados ter sido no mínimo o quádruplo do esperado para a população de beneficiários, o retorno de informações visando à conscientização pelo método “Audit and Feedback” não foi capaz de provocar diferenças significas nas solicitações de procedimentos nos diferentes grupos de médicos, conforme constatado após análise estatística. Não se evidenciou nenhuma relação significativa das variáveis independentes deste estudo (sexo, tempo de formado e tempo de cooperado), com os Índices de Solicitações de SADT dos médicos que estavam acima ou abaixo da mediana nos diferentes estratos. Persiste como desafio, a comprovação do fator ou fatores responsáveis por esta resposta. Propõe-se um conjunto de ações a serem associadas, uma vez que o processo de conscientização isoladamente foi inócuo. / Changing age, morbidity and mortality profiles of populations have caused an increase in the demand for medical procedures and a continuous increase in the cost of health services that is reaching limits in terms of available resources. It is in the context of prioritization as the rule and waste as unacceptable that optimization methods have been developed, among them “audit and feedback”. Of a total of 176 physicians of a regional cooperative, 130 were included in the study sample. The procedure ordering behaviour of each physician in the sample was monitored during all of 2004 and 2005. Audit: each month the an “index of solicitations for auxiliary diagnostic and treatment services”, or SADT, basically the average number of orders per consultation for the month, was calculated for each physician. Feedback: SADT for all participating physicians, organized by speciality and rank, were sent to each participating physician. The results were presented in a way that each physician could locate themselves in the ranking without being able to identify where any other physicians placed in the ranking. Despite absolute number of SADT on average fourfold that expected for the demographic profile of the population being served, statistical analysis of the results showed that the “Audit and Feedback” optimization method did not have a significant effect on the ordering behaviour of physicians or in the sample, un-grouped or grouped by speciality, gender, time in practice or time in the cooperative. Nor did grouping according the whether and individual physician was initially above or below the median SADT reveal any significant effect of the method on ordering behaviour. The results do show that factors other than how a physician's individual SADT compares to that of his or her peers, determines their procedure ordering behaviour. Identifying these factors remains an important challenge in the context of health services optimization.

A demanda por procedimentos médicos gerados pela transformação dos perfis etários e de morbi-mortalidade das populações tem forçado uma escalada contínua dos custos da assistência que atingem limites críticos em relação à disponibilidade de recursos. É neste contexto onde a priorização é a regra e o desperdício inaceitável, que métodos de otimização vem sendo desenvolvidos, dentre eles o “Audit and feedback”. De um total de 176 médicos de uma regional de cooperativa, 130 constituíram a amostra para estudo Quase-experimento com total de dois anos de seguimento (2004- 2005). As informações tratavam do “Índice de Solicitações de Serviços Auxiliares de Diagnose e Terapia” (Is SADT) e eram fornecidas de modo que cada profissional sabia qual era a sua posição dentro do grupo da mesma especialidade, mas não tinha condições de identificar os demais. Apesar do número absoluto de SADT realizados ter sido no mínimo o quádruplo do esperado para a população de beneficiários, o retorno de informações visando à conscientização pelo método “Audit and Feedback” não foi capaz de provocar diferenças significas nas solicitações de procedimentos nos diferentes grupos de médicos, conforme constatado após análise estatística. Não se evidenciou nenhuma relação significativa das variáveis independentes deste estudo (sexo, tempo de formado e tempo de cooperado), com os Índices de Solicitações de SADT dos médicos que estavam acima ou abaixo da mediana nos diferentes estratos. Persiste como desafio, a comprovação do fator ou fatores responsáveis por esta resposta. Propõe-se um conjunto de ações a serem associadas, uma vez que o processo de conscientização isoladamente foi inócuo. / Changing age, morbidity and mortality profiles of populations have caused an increase in the demand for medical procedures and a continuous increase in the cost of health services that is reaching limits in terms of available resources. It is in the context of prioritization as the rule and waste as unacceptable that optimization methods have been developed, among them “audit and feedback”. Of a total of 176 physicians of a regional cooperative, 130 were included in the study sample. The procedure ordering behaviour of each physician in the sample was monitored during all of 2004 and 2005. Audit: each month the an “index of solicitations for auxiliary diagnostic and treatment services”, or SADT, basically the average number of orders per consultation for the month, was calculated for each physician. Feedback: SADT for all participating physicians, organized by speciality and rank, were sent to each participating physician. The results were presented in a way that each physician could locate themselves in the ranking without being able to identify where any other physicians placed in the ranking. Despite absolute number of SADT on average fourfold that expected for the demographic profile of the population being served, statistical analysis of the results showed that the “Audit and Feedback” optimization method did not have a significant effect on the ordering behaviour of physicians or in the sample, un-grouped or grouped by speciality, gender, time in practice or time in the cooperative. Nor did grouping according the whether and individual physician was initially above or below the median SADT reveal any significant effect of the method on ordering behaviour. The results do show that factors other than how a physician's individual SADT compares to that of his or her peers, determines their procedure ordering behaviour. Identifying these factors remains an important challenge in the context of health services optimization.

INTRODUÇÃO: O câncer de pulmão é a terceira neoplasia maligna mais frequentemente diagnosticada em todo o mundo e a primeira em termos de mortalidade. O tratamento cirúrgico é a melhor abordagem nos estágios iniciais, contudo, está associado a morbimortalidade considerável. Para que o impacto do tratamento cirúrgico na diminuição global da mortalidade pelo câncer de pulmão no estado de São Paulo seja maior, precisamos conhecer os indicadores de qualidade das instituições envolvidas no tratamento desta neoplasia, através da criação de uma base de dados abrangente, confiável e transparente. Este estudo envolveu a implementação do Registro Paulista de Tratamento Cirúrgico do Câncer de Pulmão (RPCP). O desfecho principal foi a análise da qualidade dos dados capturados através de um sistema de auditoria direta e indireta, com o intuito de identificar as variáveis com menor padrão de qualidade. MÉTODOS: Estudo prospectivo, multicêntrico, com participação de 10 instituições no estado de São Paulo. A auditoria dos dados foi realizada de forma direta por revisão dos prontuários, para análise da taxa de discordância, Coeficiente Kappa e Intraclass correlation e de forma indireta para análise dos índices de completude, acurácia e consistência. RESULTADOS: Dos 536 casos disponíveis, 511 foram incluídos para a auditoria indireta. O índice total de completude por questionário variou de 0,82 a 1, sendo que as seguintes variáveis obtiveram valor individual abaixo da meta estabelecida de 0,8: ECOG, MRC, hematócrito, potássio, uréia, creatinina, DHL, albumina, cálcio e FA, tempo de cirurgia e data da recidiva. O índice total de acurácia e consistência foi 0,99 e 0,96, respectivamente. Para auditoria direta foram randomizados 100 casos entre os 511 iniciais, sendo 4 excluídos, restando 96 para análise. As variáveis com maiores taxas de discordância ( > 20%), estavam no questionário de avaliação pré-operatória (ECOG, MRC, carga tabágica, DPOC, PFP, peso, altura, IMC e exames laboratoriais). Variáveis relacionadas ao estadiamento (tamanho da neoplasia, invasão de estruturas adjacentes, status linfonodal não invasivo) e dados cirúrgicos (tempo de cirurgia) também apresentaram taxas > 20%. CONCLUSÕES: A auditoria indireta dos dados mostrou índices de completude, acurácia e consistência aceitáveis para o padrão estabelecido e comparáveis a bancos de dados internacionais. Por outro lado, a auditoria direta, revelou algumas variáveis com altos índices de discordância, dados que serão analisados futuramente para aprimoramento do RPCP e que poderão contribuir para o desenvolvimento de outras bases de dados semelhantes / BACKGROUND: Lung cancer is the third malignant neoplasm most frequently diagnosed worldwide and the first in terms of mortality. Surgical treatment is the best approach in the initial stages; however, it\'s associated with considerable morbidity and mortality. In order to improve the surgical treatment global impact on lung cancer mortality in the state of Sao Paulo, we need to know the quality indicators of the institutions involved in the treatment of this neoplasm through the creation of a extensive, reliable and transparent database. The study involved the implementation of the Paulista Lung Cancer Registry (PLCR). The main outcome was the quality analysis of the data captured through a direct and indirect audit system, in order to identify the variables with the lowest quality standard. METHODS: A prospective, multicenter study with the participation of 10 institutions in the state of São Paulo. The data audit was performed directly, through the revision of medical registries, with the intention to analyze the discordance rate; and indirectly, with the intention to analyze the completeness, accuracy and consistency indexes. RESULTS: Of the 536 cases available, 511 were included for the indirect audit. The total completeness index per questionnaire ranged from 0.82 to 1, and the following variables had a in individual value bellow the established target of 0,8: ECOG, MRC, hematocrit, potassium, urea, creatinine, LDH, albumin, calcium, AF, surgical time, date of recurrence. The total accuracy and consistency index was 0.99 and 0.96, respectively. For direct audit, 100 cases were randomized among the initial 511, of which 4 were excluded, remaining 96 for analysis. The variables with the highest discordance rates ( > 20%) were in the preoperative evaluation questionnaire (ECOG, MRC, smoking rate, COPD, PFT, weight, high, BMI and lab tests). Variables related to staging (size of neoplasm, invasion of adjacent structures, noninvasive lymph node status) and surgical data (time of surgery) also presented rates > 20%. CONCLUSIONS: Regarding the established standards, the Indirect audit showed acceptable completeness, accuracy and consistency indices, comparable to international databases. On the other hand, the direct audit revealed some variables with high discordance indices, data that will be analyzed in the future for the improvement of the PLCR and that may contribute to the development of other similar databases

Objetivos: Estimar a concordância entre as práticas e as evidências disponíveis em uma unidade de terapia intensiva pediátrica. Métodos: Estudo retrospectivo de todos os pacientes internados durante 2001. As práticas foram classificadas em adequadas ou não-adequadas de acordo com recomendações. Esperava-se para as práticas recomendadas 90% de concordância, para as contra-indicadas, discordância de até 10% e para aquelas onde havia incertezas, 50%. Resultados: Foram selecionadas 114 publicações e avaliadas 253/275 internações (92%). O uso foi considerado apropriado para albumina em 47,6% (IC 95% 39% – 55%); dopamina <3mg/kg/min 87,9% (83% – 92%); sedação e analgesia 88,6% (87% – 90%); transfusões de concentrado de hemácias 95,2% (92% – 97%); profiliaxia de úlcera de estresse 89,7% (88% – 91%). / Objectives: Estimate the concordance between the practices and the evidence available in a pediatric intensive care unit. Methods: Retrospective study of all admitted patients during 2001. The practices were classified as adequate or non-adequate according to recommendations. It was expected 90% concordance for the recommended practices, while for non-adequate practices, discordance until 10% and for those where there was doubt, 50%. Results: 114 publications were selected and 253/275 admissions (92%) were evaluated. Use was considered appropriate for albumin in 47.6% (IC 95% 39% – 55%); dopamine <3mg/kg/min 87.9% (83% – 92%); sedation and analgesia 88.6% (87% – 90%); red blood cell transfusions 95.2% (92% – 97%); stress ulcer prophylaxis 89.7% (88% – 91%).

Objetivos: Estimar a concordância entre as práticas e as evidências disponíveis em uma unidade de terapia intensiva pediátrica. Métodos: Estudo retrospectivo de todos os pacientes internados durante 2001. As práticas foram classificadas em adequadas ou não-adequadas de acordo com recomendações. Esperava-se para as práticas recomendadas 90% de concordância, para as contra-indicadas, discordância de até 10% e para aquelas onde havia incertezas, 50%. Resultados: Foram selecionadas 114 publicações e avaliadas 253/275 internações (92%). O uso foi considerado apropriado para albumina em 47,6% (IC 95% 39% – 55%); dopamina <3mg/kg/min 87,9% (83% – 92%); sedação e analgesia 88,6% (87% – 90%); transfusões de concentrado de hemácias 95,2% (92% – 97%); profiliaxia de úlcera de estresse 89,7% (88% – 91%). / Objectives: Estimate the concordance between the practices and the evidence available in a pediatric intensive care unit. Methods: Retrospective study of all admitted patients during 2001. The practices were classified as adequate or non-adequate according to recommendations. It was expected 90% concordance for the recommended practices, while for non-adequate practices, discordance until 10% and for those where there was doubt, 50%. Results: 114 publications were selected and 253/275 admissions (92%) were evaluated. Use was considered appropriate for albumin in 47.6% (IC 95% 39% – 55%); dopamine <3mg/kg/min 87.9% (83% – 92%); sedation and analgesia 88.6% (87% – 90%); red blood cell transfusions 95.2% (92% – 97%); stress ulcer prophylaxis 89.7% (88% – 91%).