Doutor -- Escola Nacional de Saude Publica, Rio de Janeiro, 2003.

O estudo Elsa-Brasil visa à investigação de fatores de risco para saúde da população adulta, sendo realizado em seis estados brasileiros. Os participantes foram submetidos, na linha de base, a diferentes exames, entre os quais a retinografia. A análise da retinografia foi realizada para identificar anormalidades de fundo de olho como retinopatia diabética, degeneração macular relacionada à idade, entre outros. Participantes com tais anomalias foram notificados em conformidade. O centro de leitura de retinografia tinha seis leitores certificados disponíveis para analisar as fotografias do fundo de olho. Os leitores foram treinados de acordo com a sua formação profissional prévia. Entre os oftalmologistas a padronização enfatizou a classificação de resultados anormais e estabelecimento dos resultados. Para estudantes de medicina, um mínimo de três meses de treinamento com um oftalmologista foi necessário antes de iniciar as leituras. O supervisor realizou controle periódico de qualidade das imagens no Centro de leitura de retinografia. No total, foram avaliadas mais de 40.000 imagens de fundo (cerca de quatro por participante). Análise de confiabilidade intra e interobservador foram realizadas para legibilidade das imagens e presença de achados anormais. Avaliaram-se as fotografias de fundo de olho de 10.648 participantes do estudo ELSA, com 52,8 ±9.2 anos, 53,5% eram mulheres e mais de 60% tinha iniciado ou concluído uma licenciatura. Os centros com maior número de participantes foram São Paulo, Minas Gerais, Rio Grande do Sul, Rio de Janeiro, Bahia e Espírito Santo, respectivamente. Cerca de 91% das imagens, tanto para olho direito como olho esquerdo, foram legíveis, 12% dos participantes apresentaram achados compatíveis com alteração ocular, demandando confirmação diagnóstica por especialista. A concordância interobservador para legibilidade e resultado da leitura (normal, alterado ou inconclusivo) obteve um coeficiente kappa moderado para ambos os olhos (entre 0,4 e 0,6). Em relação à análise intraobservador, o kappa obtido para resultado da leitura foi bom (entre 0,6 e 0,8) e para legibilidade foi moderado. Diferenças de formação e experiência entre leitores poderiam explicar tanto a variação nos coeficientes kappa para o intraobservador, quanto o kappa global. O coeficiente kappa para análise intraobservador de resultado foi bom, sendo que entre os leitores experientes houve maior concordância. Por outro lado, maior número de leitores, incluindo os com maior e menor experiência, permitiu obter coeficiente kappa moderado para análise interobservador de avaliação de anormalidades. Finalmente, os resultados mostraram adequada concordância entre observadores e os achados da retina podem ser usados para avaliar associações com desfechos clínicos incidentes nesta coorte. Os resultados indicam que a avaliação de confiabilidade intraobservador é necessária e que os leitores devem ser experientes ou treinados de forma mais consistente e por mais tempo. / The ELSA-Brasil study aims to investigate risk factors for health of adult population, being held in six Brazilian states. Participants were submitted at the baseline to different screening procedures, including the fundus photographs. The analysis of retinography was carried out in order to identify fundus abnormalities such as diabetic retinopathy, age-related macular degeneration, among others. Participants with such abnormalities were notified accordingly. The Retinography Reading Center had six certified readers available to analyze the fundus photographs. Readers were trained according to their prior professional training. Among ophthalmologists the standardization emphasized the classification of abnormal findings and establishment of the results. For medical students, a minimum of three months follow-up training with an ophthalmologist was required before start the readings. The supervisor carried out periodic quality control on the images done in the Retinography Reading Center. Altogether, it was evaluated more than 40,000 images of the fundus (about four per participant). Reliability analysis was performed for intra and inter observer regarding the readability of the images and the presence of abnormal findings. We evaluated 10,648 participants for the fundus photographs of the ELSA study, aged 52.8 ±9.2 years, 53.5% were women and over 60% had started or completed an university degree. The centers with the largest number of participants were São Paulo, Minas Gerais, Rio Grande do Sul, Rio de Janeiro, Bahia and Espírito Santo, respectively. About 91% of the images, both for right eye as left eye were legible, 12% of the participants presented findings compatible with eye change, requiring diagnostic confirmation by an expert. The inter observer agreement for readability and reading result (normal, abnormal or inconclusive) obtained a coefficient kappa moderated for both eyes (between 0.4 and 0.6). In relation to intra observador analysis, the kappa coefficient obtained for result of reading was good (between 0.6 and 0.8) and for readability it was moderate. Differences in training and experience between readers could explain both, the variation in intra observer kappa coefficients, as the overall kappa. The intra observer kappa was good, whereas among experienced readers there was greater agreement. On the other hand, the greater number of readers, including the experienced and less experienced ones, allowed to achieve moderate kappa coefficients inter observer for the assessment of abnormalities. Finally, the results showed adequate agreement between observers and the retinal findings can be used to evaluate associations with incident clinical outcomes in this cohort. The results indicate that intra observer reliability assessment is required and that the readers should be experienced or trained more consistently and for longer.

O estudo Elsa-Brasil visa à investigação de fatores de risco para saúde da população adulta, sendo realizado em seis estados brasileiros. Os participantes foram submetidos, na linha de base, a diferentes exames, entre os quais a retinografia. A análise da retinografia foi realizada para identificar anormalidades de fundo de olho como retinopatia diabética, degeneração macular relacionada à idade, entre outros. Participantes com tais anomalias foram notificados em conformidade. O centro de leitura de retinografia tinha seis leitores certificados disponíveis para analisar as fotografias do fundo de olho. Os leitores foram treinados de acordo com a sua formação profissional prévia. Entre os oftalmologistas a padronização enfatizou a classificação de resultados anormais e estabelecimento dos resultados. Para estudantes de medicina, um mínimo de três meses de treinamento com um oftalmologista foi necessário antes de iniciar as leituras. O supervisor realizou controle periódico de qualidade das imagens no Centro de leitura de retinografia. No total, foram avaliadas mais de 40.000 imagens de fundo (cerca de quatro por participante). Análise de confiabilidade intra e interobservador foram realizadas para legibilidade das imagens e presença de achados anormais. Avaliaram-se as fotografias de fundo de olho de 10.648 participantes do estudo ELSA, com 52,8 ±9.2 anos, 53,5% eram mulheres e mais de 60% tinha iniciado ou concluído uma licenciatura. Os centros com maior número de participantes foram São Paulo, Minas Gerais, Rio Grande do Sul, Rio de Janeiro, Bahia e Espírito Santo, respectivamente. Cerca de 91% das imagens, tanto para olho direito como olho esquerdo, foram legíveis, 12% dos participantes apresentaram achados compatíveis com alteração ocular, demandando confirmação diagnóstica por especialista. A concordância interobservador para legibilidade e resultado da leitura (normal, alterado ou inconclusivo) obteve um coeficiente kappa moderado para ambos os olhos (entre 0,4 e 0,6). Em relação à análise intraobservador, o kappa obtido para resultado da leitura foi bom (entre 0,6 e 0,8) e para legibilidade foi moderado. Diferenças de formação e experiência entre leitores poderiam explicar tanto a variação nos coeficientes kappa para o intraobservador, quanto o kappa global. O coeficiente kappa para análise intraobservador de resultado foi bom, sendo que entre os leitores experientes houve maior concordância. Por outro lado, maior número de leitores, incluindo os com maior e menor experiência, permitiu obter coeficiente kappa moderado para análise interobservador de avaliação de anormalidades. Finalmente, os resultados mostraram adequada concordância entre observadores e os achados da retina podem ser usados para avaliar associações com desfechos clínicos incidentes nesta coorte. Os resultados indicam que a avaliação de confiabilidade intraobservador é necessária e que os leitores devem ser experientes ou treinados de forma mais consistente e por mais tempo. / The ELSA-Brasil study aims to investigate risk factors for health of adult population, being held in six Brazilian states. Participants were submitted at the baseline to different screening procedures, including the fundus photographs. The analysis of retinography was carried out in order to identify fundus abnormalities such as diabetic retinopathy, age-related macular degeneration, among others. Participants with such abnormalities were notified accordingly. The Retinography Reading Center had six certified readers available to analyze the fundus photographs. Readers were trained according to their prior professional training. Among ophthalmologists the standardization emphasized the classification of abnormal findings and establishment of the results. For medical students, a minimum of three months follow-up training with an ophthalmologist was required before start the readings. The supervisor carried out periodic quality control on the images done in the Retinography Reading Center. Altogether, it was evaluated more than 40,000 images of the fundus (about four per participant). Reliability analysis was performed for intra and inter observer regarding the readability of the images and the presence of abnormal findings. We evaluated 10,648 participants for the fundus photographs of the ELSA study, aged 52.8 ±9.2 years, 53.5% were women and over 60% had started or completed an university degree. The centers with the largest number of participants were São Paulo, Minas Gerais, Rio Grande do Sul, Rio de Janeiro, Bahia and Espírito Santo, respectively. About 91% of the images, both for right eye as left eye were legible, 12% of the participants presented findings compatible with eye change, requiring diagnostic confirmation by an expert. The inter observer agreement for readability and reading result (normal, abnormal or inconclusive) obtained a coefficient kappa moderated for both eyes (between 0.4 and 0.6). In relation to intra observador analysis, the kappa coefficient obtained for result of reading was good (between 0.6 and 0.8) and for readability it was moderate. Differences in training and experience between readers could explain both, the variation in intra observer kappa coefficients, as the overall kappa. The intra observer kappa was good, whereas among experienced readers there was greater agreement. On the other hand, the greater number of readers, including the experienced and less experienced ones, allowed to achieve moderate kappa coefficients inter observer for the assessment of abnormalities. Finally, the results showed adequate agreement between observers and the retinal findings can be used to evaluate associations with incident clinical outcomes in this cohort. The results indicate that intra observer reliability assessment is required and that the readers should be experienced or trained more consistently and for longer.

O estudo Elsa-Brasil visa à investigação de fatores de risco para saúde da população adulta, sendo realizado em seis estados brasileiros. Os participantes foram submetidos, na linha de base, a diferentes exames, entre os quais a retinografia. A análise da retinografia foi realizada para identificar anormalidades de fundo de olho como retinopatia diabética, degeneração macular relacionada à idade, entre outros. Participantes com tais anomalias foram notificados em conformidade. O centro de leitura de retinografia tinha seis leitores certificados disponíveis para analisar as fotografias do fundo de olho. Os leitores foram treinados de acordo com a sua formação profissional prévia. Entre os oftalmologistas a padronização enfatizou a classificação de resultados anormais e estabelecimento dos resultados. Para estudantes de medicina, um mínimo de três meses de treinamento com um oftalmologista foi necessário antes de iniciar as leituras. O supervisor realizou controle periódico de qualidade das imagens no Centro de leitura de retinografia. No total, foram avaliadas mais de 40.000 imagens de fundo (cerca de quatro por participante). Análise de confiabilidade intra e interobservador foram realizadas para legibilidade das imagens e presença de achados anormais. Avaliaram-se as fotografias de fundo de olho de 10.648 participantes do estudo ELSA, com 52,8 ±9.2 anos, 53,5% eram mulheres e mais de 60% tinha iniciado ou concluído uma licenciatura. Os centros com maior número de participantes foram São Paulo, Minas Gerais, Rio Grande do Sul, Rio de Janeiro, Bahia e Espírito Santo, respectivamente. Cerca de 91% das imagens, tanto para olho direito como olho esquerdo, foram legíveis, 12% dos participantes apresentaram achados compatíveis com alteração ocular, demandando confirmação diagnóstica por especialista. A concordância interobservador para legibilidade e resultado da leitura (normal, alterado ou inconclusivo) obteve um coeficiente kappa moderado para ambos os olhos (entre 0,4 e 0,6). Em relação à análise intraobservador, o kappa obtido para resultado da leitura foi bom (entre 0,6 e 0,8) e para legibilidade foi moderado. Diferenças de formação e experiência entre leitores poderiam explicar tanto a variação nos coeficientes kappa para o intraobservador, quanto o kappa global. O coeficiente kappa para análise intraobservador de resultado foi bom, sendo que entre os leitores experientes houve maior concordância. Por outro lado, maior número de leitores, incluindo os com maior e menor experiência, permitiu obter coeficiente kappa moderado para análise interobservador de avaliação de anormalidades. Finalmente, os resultados mostraram adequada concordância entre observadores e os achados da retina podem ser usados para avaliar associações com desfechos clínicos incidentes nesta coorte. Os resultados indicam que a avaliação de confiabilidade intraobservador é necessária e que os leitores devem ser experientes ou treinados de forma mais consistente e por mais tempo. / The ELSA-Brasil study aims to investigate risk factors for health of adult population, being held in six Brazilian states. Participants were submitted at the baseline to different screening procedures, including the fundus photographs. The analysis of retinography was carried out in order to identify fundus abnormalities such as diabetic retinopathy, age-related macular degeneration, among others. Participants with such abnormalities were notified accordingly. The Retinography Reading Center had six certified readers available to analyze the fundus photographs. Readers were trained according to their prior professional training. Among ophthalmologists the standardization emphasized the classification of abnormal findings and establishment of the results. For medical students, a minimum of three months follow-up training with an ophthalmologist was required before start the readings. The supervisor carried out periodic quality control on the images done in the Retinography Reading Center. Altogether, it was evaluated more than 40,000 images of the fundus (about four per participant). Reliability analysis was performed for intra and inter observer regarding the readability of the images and the presence of abnormal findings. We evaluated 10,648 participants for the fundus photographs of the ELSA study, aged 52.8 ±9.2 years, 53.5% were women and over 60% had started or completed an university degree. The centers with the largest number of participants were São Paulo, Minas Gerais, Rio Grande do Sul, Rio de Janeiro, Bahia and Espírito Santo, respectively. About 91% of the images, both for right eye as left eye were legible, 12% of the participants presented findings compatible with eye change, requiring diagnostic confirmation by an expert. The inter observer agreement for readability and reading result (normal, abnormal or inconclusive) obtained a coefficient kappa moderated for both eyes (between 0.4 and 0.6). In relation to intra observador analysis, the kappa coefficient obtained for result of reading was good (between 0.6 and 0.8) and for readability it was moderate. Differences in training and experience between readers could explain both, the variation in intra observer kappa coefficients, as the overall kappa. The intra observer kappa was good, whereas among experienced readers there was greater agreement. On the other hand, the greater number of readers, including the experienced and less experienced ones, allowed to achieve moderate kappa coefficients inter observer for the assessment of abnormalities. Finally, the results showed adequate agreement between observers and the retinal findings can be used to evaluate associations with incident clinical outcomes in this cohort. The results indicate that intra observer reliability assessment is required and that the readers should be experienced or trained more consistently and for longer.

Resumo não disponível.

Resumo não disponível.

Resumo não disponível.

Made available in DSpace on 2014-06-12T23:14:56Z (GMT). No. of bitstreams: 2 arquivo8374_1.pdf: 402397 bytes, checksum: ef929706ff1918ad89f23f3b4ce9b216 (MD5) license.txt: 1748 bytes, checksum: 8a4605be74aa9ea9d79846c1fba20a33 (MD5) Previous issue date: 2006 / Conselho Nacional de Desenvolvimento Científico e Tecnológico / Introdução: As doenças alérgicas e em especial a alergia alimentar (AA), vêm aumentando em todo o mundo ocidental. As reações adversas a alimentos (RAA) constituem uma resposta anormal a determinado alimento e podem ser apresentadas por quaisquer indivíduos; enquanto a AA é uma resposta anormal onde há a participação do mecanismo imunológico e atinge indivíduos suscetíveis. A história clínica continua sendo um dos pilares do diagnóstico, apesar do conhecimento em nível molecular sobre as proteínas alimentares e a resposta imune. Diversas pesquisas estrangeiras vêm utilizando questionários como forma de abordagem inicial, por vezes associados a outros testes diagnósticos. No Brasil não foram encontrados questionários validados para pesquisas de RAA e AA. Objetivos: Construir e testar a reprodutibilidade de um questionário de acordo com as etapas necessárias para este processo, que contemple os principais aspectos do tema e que sirva para identificação de indivíduos suspeitos, e que possa ser utilizado na comunidade como forma inicial de abordagem de RAA e AA. Métodos: A construção do questionário foi realizada em seis etapas: levantamento bibliográfico; bases teórico-metodológicas; elaboração do questionário preliminar; submissão à revisão por comitê de especialistas; pré-teste da versão reformulada (estudo piloto exploratório); e teste-reteste do questionário. Para a reprodutibilidade do questionário foi realizado estudo do tipo descritivo, de corte transversal durante o mês de julho de 2005, cuja população foi composta por 125 crianças das faixas etárias de dois a quatro anos de idade, matriculadas em creches municipais da Prefeitura da Cidade do Recife, e portanto de baixas condições socioeconômicas. Foram entrevistados 125 pais ou responsáveis pelas crianças (teste do questionário), dos quais 35 participantes foram sorteados para o reteste 48 horas após a entrevista inicial. As estatísticas descritivas foram realizadas pelo software Epi Info 6,04 DOS; e para o estudo da reprodutibilidade teste-reteste foi aplicado o teste de concordância Kappa e respectivos intervalos de confiança (95%), por se tratarem de variáveis categóricas. Os valores de Kappa são considerados como bons quando iguais ou maiores que 0,60. Resultados: O questionário foi parcialmente reprodutível de acordo com os bons índices de concordância Kappa observados em cerca de 50% das questões. Dos 125 pesquisados, 40 (32%) alegaram reação adversa a pelo menos um alimento. Os alimentos mais incriminados foram: leite, amendoim, camarão e chocolate. As perguntas do bloco de questões sobre a RAA cuja concordância variou de boa à perfeita, foram as seguintes: a ocorrência da reação; o alimento incriminado; o quadro clínico apresentado; a reação cutânea ao encostar o alimento na pele; a ida ao hospital; a re-exposição ao alimento agressor; a recorrência da reação e a restrição alimentar. As questões relativas a tempo apresentaram índices Kappa sofríveis ou regulares. Quanto à ocorrência de RAA em outras pessoas da casa, os índices Kappa foram sofríveis. Com relação ao uso de medicação no hospital ou em casa, os índices foram regulares. Algumas perguntas do histórico atópico obtiveram índices bons ou ótimos, principalmente quanto à ocorrência de asma ou cansaço na criança e familiares. Quando a respondente era a genitora, eram observados melhores índices de concordância de um modo geral. A questão sobre a ocorrência de outras alergias em irmão (ã) apresentou índice Kappa negativo. Conclusões: As questões como índices regulares ou ruins devem ser re-escritas ou reformuladas ou mesmo retiradas. As questões com bons índices Kappa constituem um questionário reprodutível que visa a triagem de indivíduos suspeitos de alergia alimentar na população pediátrica, como forma de abordagem inicial que deve ser seguida de investigação diagnóstica. Posteriormente o processo de validação do questionário permitirá a comparação com o padrão-ouro do diagnóstico da alergia alimentar, que é a provocação oral duplo-cega controlada por placebo, quando irá medir aquilo a que se propõe

O presente trabalho teve como objetivo estimar a confiabilidade e validade do Índice de Prioridade de Tratamento (IPT) na avaliação das alterações oclusais, através da análise de 200 modelos selecionados do Arquivo de Ortodontia da Faculdade de Odontologia de Bauru, apresentando os diferentes tipos de má oclusão. Estes modelos foram avaliados em dois momentos, o primeiro, por uma comissão formada por 16 experientes ortodontistas que os avaliou subjetivamente quanto à severidade da má oclusão, dificuldade e duração do tratamento necessário. Em um segundo momento, os modelos foram avaliados através do IPT por dois ortodontistas previamente calibrados para a utilização do índice. A confiabilidade intraexaminador foi testada a partir da reavaliação de 50 pares de modelos e foi calculada pelo coeficiente de correlação intraclasse (CCI), além do teste t dependente. A confiabilidade interexaminador foi estimada sobre os 200 pares de modelos de estudo, sendo calculada pelo CCI e pelo teste t independente. Por fim, a validade do índice foi avaliada pelo comparando-se as médias dos valores obtidos pelo IPT e as percepções subjetivas através do coeficiente de correlação de Pearson. Por motivos comparativos, os modelos também foram analisados através do índice PAR (Peer Assessment Rating), que é um instrumento válido e amplamente aceito na avaliação dos resultados oclusais. Os resultados mostraram que o IPT, assim como o PAR, é um índice altamente reprodutível, uma vez que revelou altos níveis de concordância inter (ICC=0,97) e intraexaminador (ICC1=0,97 e ICC2= 0,96), e válido para investigar a severidade da má oclusão (R=0,25), dificuldade do tratamento (R=0,24) e duração do tratamento (R=0,29). No entanto, apesar de significantes, as correlações encontradas pelo IPT durante a validação foram muito fracas, principalmente em comparação com o índice PAR. Conclui-se, portanto, que o IPT apesar de reprodutível, possui pouca validade como um instrumento de avaliação das alterações oclusais. / The present study sought to estimate the reliability and validity of the Treatment Priority Index (TPI) for assessment of occlusal changes through analysis of 200 dental casts from the files of the Department of Orthodontics at Bauru Dental School, selected as a representative sample of the various types of malocclusion. These casts were evaluated twice: first, by a panel of 16 experienced orthodontists, who carried out subjective assessments of the severity of malocclusion and predicted the difficulty and duration of the required treatment. In another moment, the casts were assessed with the TPI by two orthodontists calibrated beforehand. The intrarater reliability was tested by means of reassessment of 50 pairs of models, with an intraclass correlation coefficient (ICC) and the dependent t-test. The inter-rater reliability was estimated considering all 200 casts, through the ICC and the independent t-test. Finally, the validity of the index was assessed by comparison between average TPI scores and subjective perceptions through Pearsons correlation coefficient. For comparative purposes, dental casts were also analyzed using the PAR (Peer Assessment Rating) index, a valid and widely accepted instrument for assessment of occlusal outcomes. Results showed that the TPI is a highly reproducible index, as is the PAR, with high levels of inter-rater (ICC=0.97) and intra-rater reliability (ICC1=0.97, ICC2=0.96), and is a valid instrument for assessment of malocclusion severity (R=0.25), treatment difficulty (R=0.24) and treatment duration (R=0.29). However, despite their statistical significance, the TPI correlations were very weak, particularly on comparison with the PAR. Despite its reproducibility, the TPI has very limited validity for assessment of occlusal changes provided by the orthodontic treatment.

O presente trabalho teve como objetivo estimar a confiabilidade e validade do Índice de Prioridade de Tratamento (IPT) na avaliação das alterações oclusais, através da análise de 200 modelos selecionados do Arquivo de Ortodontia da Faculdade de Odontologia de Bauru, apresentando os diferentes tipos de má oclusão. Estes modelos foram avaliados em dois momentos, o primeiro, por uma comissão formada por 16 experientes ortodontistas que os avaliou subjetivamente quanto à severidade da má oclusão, dificuldade e duração do tratamento necessário. Em um segundo momento, os modelos foram avaliados através do IPT por dois ortodontistas previamente calibrados para a utilização do índice. A confiabilidade intraexaminador foi testada a partir da reavaliação de 50 pares de modelos e foi calculada pelo coeficiente de correlação intraclasse (CCI), além do teste t dependente. A confiabilidade interexaminador foi estimada sobre os 200 pares de modelos de estudo, sendo calculada pelo CCI e pelo teste t independente. Por fim, a validade do índice foi avaliada pelo comparando-se as médias dos valores obtidos pelo IPT e as percepções subjetivas através do coeficiente de correlação de Pearson. Por motivos comparativos, os modelos também foram analisados através do índice PAR (Peer Assessment Rating), que é um instrumento válido e amplamente aceito na avaliação dos resultados oclusais. Os resultados mostraram que o IPT, assim como o PAR, é um índice altamente reprodutível, uma vez que revelou altos níveis de concordância inter (ICC=0,97) e intraexaminador (ICC1=0,97 e ICC2= 0,96), e válido para investigar a severidade da má oclusão (R=0,25), dificuldade do tratamento (R=0,24) e duração do tratamento (R=0,29). No entanto, apesar de significantes, as correlações encontradas pelo IPT durante a validação foram muito fracas, principalmente em comparação com o índice PAR. Conclui-se, portanto, que o IPT apesar de reprodutível, possui pouca validade como um instrumento de avaliação das alterações oclusais. / The present study sought to estimate the reliability and validity of the Treatment Priority Index (TPI) for assessment of occlusal changes through analysis of 200 dental casts from the files of the Department of Orthodontics at Bauru Dental School, selected as a representative sample of the various types of malocclusion. These casts were evaluated twice: first, by a panel of 16 experienced orthodontists, who carried out subjective assessments of the severity of malocclusion and predicted the difficulty and duration of the required treatment. In another moment, the casts were assessed with the TPI by two orthodontists calibrated beforehand. The intrarater reliability was tested by means of reassessment of 50 pairs of models, with an intraclass correlation coefficient (ICC) and the dependent t-test. The inter-rater reliability was estimated considering all 200 casts, through the ICC and the independent t-test. Finally, the validity of the index was assessed by comparison between average TPI scores and subjective perceptions through Pearsons correlation coefficient. For comparative purposes, dental casts were also analyzed using the PAR (Peer Assessment Rating) index, a valid and widely accepted instrument for assessment of occlusal outcomes. Results showed that the TPI is a highly reproducible index, as is the PAR, with high levels of inter-rater (ICC=0.97) and intra-rater reliability (ICC1=0.97, ICC2=0.96), and is a valid instrument for assessment of malocclusion severity (R=0.25), treatment difficulty (R=0.24) and treatment duration (R=0.29). However, despite their statistical significance, the TPI correlations were very weak, particularly on comparison with the PAR. Despite its reproducibility, the TPI has very limited validity for assessment of occlusal changes provided by the orthodontic treatment.