[pt] O Ages and Stages Questionnaire Terceira Edição (ASQ-3) é um teste de screening usado para detectar atrasos no desenvolvimento em crianças na idade pré-escolar. Apesar de ter sido traduzido para diversas línguas como Espanhol, Francês, Dinamarquês, Holandês, Coreano e Chinês, o ASQ ainda não foi traduzido para o Português ou estudado no Brasil. Neste estudo, as propriedades psicométricas do ASQ-BR foram examinadas para compreender a eficácia do instrumento no sistema público de creches e pré-escolas. A retro-tradução foi utilizada, e adaptações culturais foram feitas para assegurar a adaptação completa do teste para a cultura brasileira. A versão final do ASQ-BR foi aplicada em uma amostra de 46.650 crianças em creches públicas do município do Rio de Janeiro. A Teoria Clássica dos Testes (TCT; Alfa de Cronbach e Correlação Item-Total), e a Teoria de Resposta ao Item (TRI) baseada na análise de Mokken (H de Loevinger e rho de MS) e modelo de análise de Rasch (médias quadráticas de infit e outfit, confiabilidade de itens e pessoas) foram usadas. O coeficiente alfa de Cronbach oscilou entre 0.52 e 0.89, e a Correlação Item-Total revelou apenas 50 dos 570 itens (8.8 por cento) abaixo de 0.30. A análise de Mokken corroborou com a TCT. Na análise Rasch, apenas 53 dos 570 itens (9.3 por cento) mostraram problemas de ajuste, mas nenhum item apresentou infit maior que 2.0. Confiabilidade da Pessoa variou entre 0.34 e 0.62 e Confiabilidade do Item oscilou entre 0.83 e 0.99. No geral, o instrumento mostrou boas propriedades psicométricas. Os resultados e o uso da SQ-BR no sistema público de creches e pré-escolas são discutidos. / [en] The Ages and Stages Questionnaire Third Edition (ASQ-3) is a screening test used to detect developmental delays in pre-school children. Despite being translated for many languages such as Spanish, French, Danish, Dutch, Korean and Chinese, ASQ have not been translated to Brazilian Portuguese or studied in Brazil yet. In this study, Psychometric properties of ASQ-BR were examined to understand the effectiveness of the instrument in public child care centers system. Back-translation was used and, cultural adaptations were made to assure the full adaptation of the test to Brazilian culture. The final version of ASQ-BR was used in 45,650 children in public child care centers from Rio de Janeiro. Classical Test Theory (CTT; Cronbach’s alpha and item-to-total correlations), and Item Response Theory (IRT) based on Mokken analysis (Loevinger’s H and MS rho) and Rasch modeling analysis (infit and outfit mean squares, and person and item reliability) were used. Cronbach’s coefficient alpha ranged from 0.52 to 0.89, and item-to-total correlations revealed only 50 of 570 items (8.8 per cent) under 0.30. Mokken analysis corroborated with CTT indexes. In Rasch analysis, only 53 of 570 (9.3 per cent) items showed misfit problems, but no item presented infit higher than 2.0. Person reliability ranged from 0.34 to 0.62 and item reliability ranged from 0.83 to 0.99. Overall, the instrument showed good psychometric properties. The results and the usage of ASQ-BR in public child care system are discussed.

[pt] O Ages e Stages Questionnaire Terceira Edição na tradução para o português-BR (ASQ3-BR) é um teste de rastreio usado para avaliar o desenvolvimento de crianças na idade pré-escolar (8 a 60 meses) em cinco áreas do desenvolvimento: Comunicação Coordenação Motora Ampla, Coordenação Motora Fina, Resolução de Problemas e Pessoal e Social, tendo sido aplicado pela Secretaria de Educação do Rio de Janeiro em 124.292 crianças de 468 creches públicas do município do Rio de Janeiro, nos anos de 2010, 2011 e 2012. Foi realizada uma análise estatística dos escores obtidos de cada criança para identificação dos dados normativos de interpretação através das médias e desvios padrão bem como os percentis de 5 porcento e 10 porcento. Esses resultados foram comparados com os valores normativos estabelecidos pelo instrumento original americano, para se confirmar suas propriedades psicométricas e identificar diferenças dos resultados obtidos. Numa segunda abordagem, os escores foram avaliados na sua consistência interna através dos coeficientes de Alfa de Cronbach e da Correlação Item-Total para identificação de possíveis discrepâncias do instrumento com o reflexo na sua fidedignidade quando aplicado em ambiente de creche. Os resultados comprovaram que embora o ASQ3-BR seja um bom instrumento tendo as mesmas propriedades psicométricas da versão original em inglês, é passível de ter sua fidedignidade aumentada quando aplicado em ambiente de creches pela adaptação de alguns itens que possam levar em consideração os procedimentos operacionais específicos dessas creches. / [en] The Ages and Stages Questionnaire Third Edition in translation to Portuguese-BR (ASQ3-BR) is a screening test used to evaluate the development of children in pre-school age (8-60 months) in five areas of development: Communication Coordination Wide motor, coordination motor Fine, Troubleshooting and Personal and Social and applied by the Secretariat of the Rio de Janeiro Education 124,292 children in 468 public kindergartens in the city of Rio de Janeiro, in the years 2010, 2011 and 2012. A statistical analysis of the scores was carry on of each child in order to identify the normative interpretation through the means and standard deviations as well as 5 percent and 10 percent percentiles. These results were compared with normative values of American original instrument, to confirm its psychometric properties and identify differences between results. In a second approach, the scores were assessed on their internal consistency using the coefficients of Cronbach s Alpha and Correlation Item-Total to identify possible instrument s discrepancies with the reflection in its reliability when applied in day care environment. The results showed that although the ASQ3-BR is a good instrument with same psychometric properties of the original English version, is likely to have increased their reliability when applied in day care environment by adapting some items that can take into account the day care specific operational procedures.

[pt] A motivação é um dos construtos mais estudados em psicologia geral na esfera científica mundialmente. Entender o porquê determinado comportamento ocorre parece instigar inúmeros pesquisadores que se debruçam na investigação de seus componentes. Do mesmo modo, identificar as influências motivacionais dos agentes sociais determinantes para o clima motivacional esportivo, como treinadores, pais e pares/colegas de time, parece nevrálgico na prática esportiva, ainda mais a partir da percepção do atleta no contexto do esporte de alto rendimento. Clima motivacional pode ser definido como o estado ambiental da prática esportiva que influencia os níveis de motivação. Diante disso, esta pesquisa foi estruturada a partir de dois estudos empíricos com o objetivo de desenvolver, aplicar e validar instrumento de medida multidimensional para avaliação de clima motivacional em atletas de alto rendimento. No estudo 1, de design qualitativo, 23 (n=23) atletas de alto rendimento, com idades compreendidas entre os 18 e os 33 anos, ambos os gêneros, praticantes de 5 modalidades esportivas - judô, futebol, nado artístico, Mixed Marcial Arts (MMA) e vôlei de praia - foram entrevistados por meio de grupos focais, em formato semiestruturado, para investigar as influências motivacionais de treinadores, pais e pares/colegas de time na prática esportiva. A análise de conteúdo foi realizada através do software Iramuteq. A partir dos resultados obtidos na porção qualitativa e seguindo as etapas de construção de instrumentos, validação de conteúdo, análise de juízes e análise semântica, foi desenvolvido o Questionário Multidimensional de Clima Motivacional (QMCM). No estudo 2, o novo instrumento foi aplicado em uma amostra de 166 sujeitos (n=166), de ambos os gêneros, com idades compreendidas entre os 18 e os 59 anos, todos atletas de alto rendimento de diversas modalidades esportivas, individual e coletiva (futebol; futsal; basquete; rugby; artes marciais). Análises psicométricas foram realizadas e os resultados indicam que o QMCM apresenta evidências de validade e fidedignidade compatíveis com a finalidade deste estudo. Pretendeu-se, com este questionário, instrumentalizar psicólogos e profissionais do esporte ampliando a consciência sobre a importância da identificação e mensuração do clima motivacional em atletas de alto rendimento. / [en] Motivation is one of the most studied constructs in general psychology in the scientific sphere worldwide. Understanding why a certain behavior occurs seems to instigate countless researchers who are focused on investigating its components. Likewise, identifying the motivational influences of social agents that determine the sports motivational climate, such as: coaches, parents and peers/teammates, seems to be critical in sports practice, especially from the athlete s perception in the context of high performance sport. Motivational climate can be defined as the environmental state of sports practice that influences motivation levels. Therefore, this research was structured from two empirical studies with the aim of developing, applying and validating a multidimensional measurement instrument for evaluating the motivational climate in high-performance athletes. In study 1, of qualitative design, 23 (n=23) high performance athletes, aged between 18 and 33 years, both genders, practitioners of 5 sports: judo, soccer, artistic swimming, Mixed Martial Arts (MMA) and beach volleyball were interviewed through focus groups, in a semi-structured format, to investigate the motivational influences of coaches, parents and peers/teammates on sports practice. Content analysis was performed using the Iramuteq software. From the results obtained in the qualitative portion and following the steps of instrument construction, content validation, judge analysis and semantic analysis, the Multidimensional Motivational Climate Questionnaire (MCMCM) was developed. In study 2, the new instrument was applied to a sample of 166 subjects (n=166), of both genders aged between 18 and 59 years, all high-performance athletes from various sports, individual and collective (soccer; futsal; basketball; rugby; martial arts). Psychometric analyzes were performed and the results indicate that the QMCM presents evidence of validity and reliability compatible with the purpose of this study. The aim of this questionnaire was to equip psychologists and sports professionals, increasing awareness of the importance of identifying and measuring the motivational climate in high-performance athletes.

[pt] De 2010 a 2012, a cidade do Rio de Janeiro iniciou um projeto de grande escala para avaliar o desenvolvimento de crianças matriculadas em creches e pré-escolas públicas. A avaliação do desenvolvimento infantil foi realizada anualmente, com uma média de 60 mil crianças em cerca de 80 por cento das creches e pré-escolas públicas da cidade. Depois de receber treinamento específico, os profissionais de cada instituição (por exemplo, professoras e crecheiras) aplicaram os questionários que compõe o sistema Ages and Stages Questionnaire (ASQ-3 e ASQ:SE) para detectar possíveis condições de risco em relação aos principais marcadores do desenvolvimento infantil. Entretanto, no contexto brasileiro, há uma ausência de estudos que tenham investigado as propriedades psicométricas da versão brasileira do ASQ:SE. Além disso, poucos estudos discutiram os resultados do ASQ:BR e ASQ:SE com respeito a avaliações longitudinais, diferenças de performance em função do gênero e visando incorporação dos resultados estatísticos em políticas públicas. Dito isto, a presente tese teve os seguintes objetivos: (1) investigar as principais propriedades psicométricas do ASQ:SE usando metodologia de Teoria Clássica dos Testes (TCT) e da Teoria da Resposta do Item (TRI) e (2) apresentar uma visão geral do desenvolvimento infantil em serviços de creche usando, para isso, os dados que foram coletados longitudinalmente por este projeto. Assim, esta tese compreende cinco artigos nos quais foram realizados os seguintes estudos. Inicialmente, com base na TCT, a estrutura fatorial do ASQ:SE foi investigada, a fidedignidade foi calculada usando o alfa de Cronbach, e pontos de corte preliminares foram calculados com base em médias e desvios-padrão. O segundo artigo ampliou a investigação da estrutura de fatorial do ASQ:SE e no terceiro artigo, um modelo de multidimensional da TRI foi usado para duas finalidades: (i) confirmar a dimensionalidade de todas as escalas do ASQ:SE e (ii) verificar as características de seus itens. No quarto e quinto artigo, o foco foi parcialmente alterado das propriedades psicométricas para os resultados preliminares de uma avaliação longitudinal de crianças que foram avaliadas ao longo de dois ou três anos consecutivos. Os resultados gerais evidenciam a validade, confiabilidade e utilidade do ASQ:SE e sugerem que crianças que estão matriculadas em creches públicas do Brasil/Rio de Janeiro, apesar da adversidade ambiental, não estão em risco de atrasos sérios no desenvolvimento. / [en] From 2010 to 2012, the city of Rio de Janeiro initiated a large-scale project to evaluate the development of children who were enrolled in daycare centers and public preschools. The evaluation of child development was performed annually, with an average of 60,000 children in more or less 80 percent of the daycare centers and public preschools in the city. After receiving specific training, professionals at each institution (e.g., teachers and caregivers) applied the Ages and Stages Questionnaires (ASQ-3 and ASQ:SE) to screen for risk factors (e.g., developmental delays) with regard to the major markers and milestones of child development. However, in the Brazilian context, there is a lack of studies that have investigated the psychometric properties of the Brazilian version of the ASQ:SE. Moreover, a dearth of studies has discussed the results of both the ASQ:BR and ASQ:SE with regard to longitudinal assessments, gender differences, and incorporation of the statistical results into public policies. That said, the present thesis had the following objectives: (1) to investigate the main psychometric properties of the ASQ:SE using both Classical Test Theory (CTT) methodology and Item Response Theory (IRT) and (2) to present an overview of child development in daycare services using the data that were gathered from this longitudinal project. Thus, this thesis comprises five articles in which the following studies were conducted. Initially, based on CTT, the factor structure of the ASQ:SE was estimated using Cronbach s, and preliminary cutoff points were computed, based on means and standard deviations. The second article extended investigation of the factor structure of the ASQ:SE and in the third article, a multidimensional IRT model was used for two purposes: (i) to confirm the dimensionality of all scales of the ASQ:SE and (ii) to verify its item characteristics. In the fourth and fifth article, the focus partially shifted from psychometric properties to the preliminary results of a longitudinal evaluation of children who were assessed over two or three consecutive years. The overall results provide evidence of the validity, reliability, and utility of the ASQ:SE and suggest that children who are enrolled in Brazilian/Rio de Janeiro s public daycare centers, despite environmental adversity, are not at risk of serious developmental delays.

[pt] Os transtornos de ansiedade e humor são disfunções emocionais freqüentes que muito repercutem na qualidade de vida humana. Testes psicométricos quantificam esses transtornos e orientam condutas clínicas. A aplicação de ferramentas e conceitos da metrologia pode contribuir para a garantia de confiabilidade dos instrumentos de medição psicométricos. Os objetivos do trabalho são a elaboração de uma proposta de harmonização entre termos utilizados em psicometria e as definições universais para terminologia de medição segundo o Vocabulário Internacional de Termos Fundamentais e Gerais de Metrologia (VIM); e a avaliação da confiabilidade metrológica dos inventários de Beck e Hamilton para quantificação de ansiedade e transtorno de humor. Foram realizados: (i) estudos bibliográficos dos termos da metrologia e psicometria para elaboração da proposta de harmonização; (ii) aplicação dos inventários de Beck (BAI e BDI) e Hamilton (HAM-A e HAM-D) a 100 pacientes (iii) avaliação de validade, de convergência de quantificação de transtornos e cálculo da incerteza de medição entre inventários de Beck e Hamilton; (iv) desenvolvimento e implementação da Análise de Seleção de Parâmetros dos Itens (ASPI), abordagem elaborada para identificação da capacidade de cada item de um inventário, em discernir entre os diferentes níveis de acometimento do constructo. Todos os inventários quantificam de modo equivalente somente os pacientes graves. BAI e BDI apresentaram os maiores percentuais de itens capazes de discernimento entre níveis de acometimento. A boa correspondência obtida entre as abordagens ASPI quantitativa e ASPI qualitativa caracterizou a capacidade preditiva dos indicadores quantitativos propostos na identificação de desempenho de item. / [en] The anxiety disorders and humor are very frequent dysfunctions emotional impact on the quality of human life. Psicométricos quantify these tests and clinical disorders guide ducts. The application of tools and concepts of metrology can contribute to ensuring reliability of psicométricos measurement instruments. Job objectives are the development of a proposal for harmonization between terms used in psicometria and universal definitions for measuring terminology in accordance with the international vocabulary of basic and general terms in Metrology (VIM); and the assessment of the reliability of Beck inventories metrology and Hamilton to quantification of anxiety and mood disorder. Were made: (I) studies bibliographical terms of metrology and psicometria for the establishment of the proposed harmonization; (ii) implementation of inventories of Beck (BAI and BDI) and Hamilton (ham and HAM-d) 100 patients (iii) assessment of validity, quantification of convergence and disorders of the measurement uncertainty calculation between inventories of Beck and Hamilton; (iv) development and implementation of the analysis of selecting parameters of items (ASPI) approach to identification of the capacity of each item of an inventory to discern between different levels of acometimento of construction. All inventories quantify equivalent only serious patients. BAI and BDI submitted the largest percentage of items capable of discernment among acometimento levels. Good match obtained between the approaches quantitative and qualitative ASPI ASPI characterised the predictive capacity of quantitative indicators proposed in item performance identification.

[pt] Inteligência Emocional (IE) é um tema que vem ganhando cada vez mais espaço no mundo corporativo, sobretudo no que se refere a sua avaliação entre os profissionais que ocupam cargos de liderança. No entanto, atualmente não existem instrumentos devidamente validados para este contexto que, especificamente, avaliem a IE de líderes. Adicionalmente, considerando que tal grupo compõe uma amostra high-stake (i. e. amostras que naturalmente são mais voltadas a terem suas respostas contaminadas de forma a agradar o avaliador), surge a necessidade de um instrumento que possa ter um controle mais preciso do viés da desejabilidade social. Diante disso, o estudo objetivou construir e buscar evidências iniciais de validade da escala Avaliação da Inteligência Emocional de Líderes (AIEL), uma medida que pretende aferir quatro habilidades da inteligência emocional com base no método da escolha forçada. Foram realizados estudos para buscar evidências de validade de conteúdo e de estrutura interna mediante a utilização de índices de concordância dos itens, análise fatorial exploratória, análise fatorial confirmatória e análises com base na Teoria de Resposta ao Item Thurstonian (TRI-T). A versão final do instrumento foi respondida por uma amostra de 215 líderes. Após todas as análises realizadas, foram selecionados 36 itens (sociabilidade = 11, bem-estar = 6, autocontrole = 10 e emocionalidade = 9) com cargas fatoriais que variaram de 0,387 até 0,902 e um valor médio de 0,64. O modelo também apresentou um bom ajuste. A precisão dos escores fatoriais foi elevada em todos os fatores, variando de 0,97 a 0,98. Apesar de uma boa estrutura interna e possibilidade de uso em pesquisas científicas, cabe destacar algumas limitações da AIEL: a amostra utilizada foi pequena e existiu alta discrepância dos valores médios da desejabilidade social entre os itens dos blocos triplets. Sugere-se a criação de novos itens com maior balanceamento e em formato de quádruplas. Adicionalmente, faz-se necessária a aplicação em amostras maiores e mais diversas, possuindo respondentes com características demográficas distintas, para proceder estudos acerca de sua padronização. Sugere-se também a realização de estudos de validade baseados nas relações com medidas externas. Por fim, espera-se que o presente estudo contribua para o desenvolvimento de medidas de IE no formato de escolha forçada específicas para o contexto organizacional, contribuindo, assim, com o trabalho do(a) psicólogo(a) organizacional e com o avanço do campo brasileiro da psicologia organizacional e do trabalho, no que se refere à criação de mais instrumentos devidamente validados e próprios para esta área de atuação. / [en] Emotional Intelligence (EI) is a theme that is gaining more and more space in the corporate world, especially with regard to its evaluation among professionals who occupy leadership positions. However, there are currently no properly validated instruments for this context that specifically assess the EI of leaders. Additionally, considering that this group composes a high-stake sample (i.e. samples that are naturally more focused on having their responses contaminated in order to please the evaluator), the need for an instrument that can have a more precise control of the social desirability bias arises. Therefore, the study aimed to construct and seek initial evidence of validity of the Evaluation of Emotional Intelligence of Leaders (AIEL) scale, a measure that aims to assess four emotional intelligence skills based on the forced choice method. Studies were conducted to search for evidence of contente validity and internal structure through the use of item agreement indices, exploratory factor analysis, confirmatory factor analysis and analyses based on the Thurstonian Item Response Theory (TRI-T). The final version of the instrument was answered by a sample of 215 leaders. After all the analyses performed, 36 items were selected (sociability = 11, well-being = 6, selfcontrol = 10 and emotionality = 9) with factor loadings ranging from 0.387 to 0.902 and an average value of 0.64. The model also presented a good fit. The accuracy of factorial scores was high in all factors, ranging from 0.97 to 0.98. Despite a good internal structure and possibility of use in scientific research, it is worth highlighting some limitations of the AIEL: the sample used was small and there was a high discrepancy of the mean values of social desirability among the items of the triplet blocks. It is suggested to create new items with greater balancing and in quadruple format. Additionally, it is necessary to apply it to larger and more diverse samples, with respondents with different demographic characteristics, to carry out studies about their standardization. It is also suggested to conduct validity studies based on relations with external measures. Finally, it is expected that the present study will contribute to the development of EI measures in the forced choice format specific to the organizational context, thus contributing to the work of the organizational psychologist and the advancement of the Brazilian field of organizational and work psychology, with regard to the creation of more properly validated and suitable instruments for this activity área

[pt] Neste trabalho apresentamos algumas contrubuições ao estudo dos modelos de avaliação estatística usados nas ciências sociais. As contribuições originais são: i ) uma descrição unificada sobre como a teoria da medição evoluiu nas diversas disciplinas científicas; ii ) uma resenha abrangente sobre os métodos de estimação por máxima verossimilhança empregados na medição estatística; iii ) uma formulação geral do métodos da máxima verossimilhan ça tendo em vista a aplicação em modelos não-lineares; e principalmente, iv ) a apresentação do método da aproximação estocástica na estimação dos modelos estatísticos de avaliação e medição. Os modelos não-lineares ocorrem freqüentemente nas ciências sociais onde é importante a modelagem de variáveis de resposta dicotômicas ou ordinais. Em particular, este trabalho trata dos modelos da teoria da resposta ao item, dos modelos de regressão logística e dos modelos de componentes aleatórias em geral. A estimação destes modelos ainda é objeto de intensa pesquisa. Não se pode afirmar que exista um método de estimação inteiramente confiável. Os métodos aproximados produzem estimativas com viés acentuado nas componentes de variância, enquanto os métodos de integração numérica e os métodos bayesianos podem apresentar problemas de convergência em muitos casos. O método da aproximação estocástica se baseia na maximização da verossimilhança e emprega o algoritmo de Robbins- Monro para resolver a equação do escore. Como um método estocástico ele gera um processo de Markov que se aproxima das estimativas desejadas e portanto pode ser considerado um MCMC (Monte Carlo Markov chain) freqüentista. Nas simulações realizadas o método apresentou um bom desempenho, produzindo estimativas com viés pequeno, precisão razoável e raros problemas de convergência. / [en] This work presents a study of statistical models used for assessment and measurement in the social sciences. The main contributions are: i ) a unified description of how evaluation, assessment, and the theory of measurement evolved within several branches of science; ii ) a review of estimation methods currently employed in nonlinear models; iii ) a general formulation of the maximum likelihood estimation method; and particularly, iv the presentation of the stochastic approximation method for estimation of non linear statistical models in measurement and assessment. Non linear models occurs frequently in the social sciences where it is important to model binary or ordinal response variables. This work deals with item response theory models, logistic regression models and general models with random components. The estimation of these models has been the subject of several recent simulation studies. One cannot say there is a best estimation method. The approximate methods are known to produce biased estimates, numerical integration methods and bayesian methods can present convergence problems in many cases. Stochastic approximation method is a maximum likelihood method that uses the Robbins-Monro algorithm to solve the score equation. As a stochastic approximation method it generates a Markov chain that converges to the desired estimates and can be considered a frequentist MCMC. A simulation study and a comparative estimation study show a good performance, the method producing small bias for the estimates, good precision, and very rare convergence problems.