Clinical immunohistochemistry (IHC) techniques are not yet fully standardized. In this project, a standardization method was developed and tested for proficiency testing (PT) in external quality assurance (EQA) and quality control (QC) in clinical IHC laboratories. The breast cancer markers estrogen receptor (ER), progesterone receptor (PR) and human epidermal growth factor 2 (HER2) were used as a model system. Digital image analysis (IA) was used in conjunction with new calibrated and standardized cell line microarrays (CLMA). CLMAs built from nine formalin-fixed paraffin-embedded (FFPE) breast cancer cell lines were used for both QC controls and PT samples, instead of traditionally used FFPE tissues, in the standardization of breast cancer IHC. IA was used for measurement of IHC results, and compared to evaluation by the traditional expert-assessment method. Laboratory Score: Reference Score Ratio (LSRSR) was derived from Histo-Scores (HScores) determined by IA. HScores and LSRSRs were examined statistically and evaluated as histograms and boxplots to summarize and rank participant laboratory EQA results, in comparison to a reference sample or reference laboratories in two consecutive Canada-wide EQA runs. LSRSR-derived reference ranges were highly sensitive in evaluating laboratory EQA performance in PT as well as for monitoring of controls for QC. Laboratory on-slide tissue and cell-line IHC QA controls were assessed using IA and Levey Jennings QC charts. These charts were determined to be an excellent way to observe trending in laboratory IHC staining over time, particularly when cell line controls were used. This approach also reduced the time and labor costs for PT evaluation. Overall, cell line calibration controls were functionally equivalent or better than tissue-based controls in QC and PT mainly because of cell line biological homogeneity and sample availability. This study identified an optimal design for preparation of IHC cell line controls and PT samples for breast cancer markers. Optimal, intermediate staining cell line IHC controls were identified for all three breast cancer markers. Using IA with LSRSR and cell line samples is recommended for standardization of IHC methodology. This approach advances QA for diagnostic IHC and when implemented will improve patient care

The purpose of this research was to develop and test a three-section cloze test of English proficiency and to norm it for use as a means of level placement. The study sample consisted of ESL students at Brookhaven Community College and the Intensive English Language Institute of North Texas State University, as well as a group of native speakers. Four types of statistical analysis were used: analysis of variance, Pearson product-moment correlations, a t-Test, and a multiple comparison procedure, the Scheffé test. The cloze test was sensitive to significant differences between every level at both schools. Subsequently it was normed to a four-level system and score ranges for each level were suggested.

O crescimento do número de laboratórios acreditados na ISO 17025:2005, ocasionou, por consequência, um aumento na demanda de diversos serviços relacionados a manutenção destes tipos de sistema. Um Item de grande importância da norma ressalta a importância da garantia da qualidade de resultados de ensaio, uma maneira de se verificar isto é através da participação em um tipo de ensaio interlaboratorial conhecido como programa de ensaio de proficiência ou EP. Este tipo de serviços apresentou um crescimento considerável em sua demanda, especialmente no território nacional, devido a um requisito do próprio INMETRO presente na NIT DICLA-026, o qual exige que um laboratório participe de um EP para que o mesmo se torne elegível a obter a sua acreditação em ISO 17025:2005. Com o aumento em sua demanda, surge o interesse por parte dos provedores de ensaios de proficiência de otimizar seus processos sem que os requisitos da qualidade sejam comprometidos. Uma maneira de se atingir este objetivo é através da modernização de seus sistemas de armazenamento de informação e cálculos para um sistema computadorizado. Entretanto o mercado não apresenta ferramentas especialmente desenvolvidas para esta finalidade, e as utilizadas para isto não apresentam todas as características exigidas pelas normas ISO 17025:2005 e ISO 17043:2011 e, para serem utilizadas neste tipo de ambiente, exigem longos processos de avaliação e validação dos sistemas atuais. Em muitos casos o usuário é forçado a utilizar múltiplos softwares ao longo do processo, tornando todo o processo ainda mais passível de erros e, em casos extremos, gerando erros na apresentação de resultados finais. Portanto, surge a necessidade do desenvolvimento de uma ferramenta computacional especializada e desenvolvida com o foco neste tipo especifico de laboratório, atendendo aos requisitos normativos e trazendo características úteis para uma melhor otimização do processo. / The growth in the number of laboratories certified in the ISO 17025:2005 triggered, therefore, an increase in the demand for several services related to the maintenance of these kinds of systems. One very important topic in the standard emphasizes on the importance of the assurance of the quality of the result obtained, which may be verified by participating in a type of interlaboratory tests known as proficiency testing programs or PT. These types of services have grown considerably in demand., especially in the national territory, due to a requirement of INMETRO present on the standard NIT DICLA-026, which demands that laboratories take place on EP to become eligible for an accreditation in ISO 17025:2005. With its increase in demand, it becomes more interesting for proficiency test providers to optimize their systems all the while without compromising their quality, one of the ways of achieving this objective is through and upgrade on their information storage systems and calculation systems to a computerized one. However, the market does not feature specialized tools developed for this specific task, and the ones being used for this goal do not feature all of the characteristics required by the ISO 17025:2005 and ISO 17043:2011 standards, and, therefore, require a long process of evaluation and validation for being used in this type of environment. In a lot of cases its also common that the enterprise is forced to use multiple software\'s throughout the process, making the entire process more susceptible to mistakes and in extreme cases even generating mistakes that might be present on the end results sent to the client. Therefore, the necessity of developing a specialized computer tool arises, one developed focused specifically on these types of laboratories, complying with every requirement made by the standard and bringing with it useful features for a better optimization of the process.

Os ensaios de proficiência têm sido utilizados, por laboratórios de ensaio e calibração acreditados sob a norma ISO/IEC 17025 (General requirements for the competence of testing and calibration laboratories), como principal mecanismo para garantia da qualidade de seus resultados. Além de atender a um requisito normativo, a participação satisfatória neste tipo de atividade é utilizada, por organismos acreditadores, como condição à obtenção e manutenção da acreditação. Entretanto, existe uma carência por provedores de ensaios de proficiência acreditados de acordo com a norma ISO/IEC 17043 (Conformity assessment — General requirements for proficiency testing), o que causa dificuldades aos laboratórios. Esta dissertação teve como objetivo analisar a viabilidade de que laboratórios acreditados à ISO/IEC 17025 atuem, simultaneamente, como provedores de ensaios de proficiência, acreditados à ISO/IEC 17043. Para isso, foram estabelecidas as relações entre os itens das normas, identificadas e analisadas as exigências adicionais e adaptações necessárias no sistema de gestão, identificados os potenciais conflitos de interesses e estabelecidas propostas de atendimento para cada item normativo afetado. Os artigos que constituem esta pesquisa foram validados por um grupo de especialistas na área da metrologia, sendo as suas opiniões consideradas nos estudos realizados. Conclui-se, ao final, que a atuação simultânea proposta é viável, exigindo adaptações no sistema de gestão e procedimentos complementares referentes à confidencialidade e à imparcialidade. Como resultado prático, espera-se minimizar a carência por este serviço, sem comprometer sua confiabilidade. / Proficiency tests have been used by testing and calibration laboratories accredited to the ISO/IEC 17025 standard (General requirements for the competence of testing and calibration laboratories) as the main mechanism for assuring the quality of their results. Besides attending to a normative requirement, the satisfactory participation in this kind of activity is used by accreditation bodies as a condition to obtaining and maintaining the accreditation. However, there is a lack of proficiency testing providers accredited according to the ISO/IEC 17043 standard (Conformity assessment — General requirements for proficiency testing), which causes laboratories to have difficulties. This thesis had as its goal to analyze the viability of laboratories accredited to the ISO/IEC 17025 acting simultaneously as proficiency testing providers, accredited to the ISO/IEC 17043. For that, relations between the items of both standards have been established, additional requirements and necessary adaptations in the management system have been identified and analyzed, potential conflicts of interest have been identified and solutions have been proposed for each normative item. A group of experts in the field of metrology validated the articles that constitute this research and their opinions have been considered in the studies. At the end, the conclusion was that the proposed simultaneous acting is viable, requiring adaptations in the management system and complementary procedures referring to confidentiality and impartiality. As a practical result, it is hoped to minimize the shortage for this kind of service, without compromising its reliability.

O crescimento do número de laboratórios acreditados na ISO 17025:2005, ocasionou, por consequência, um aumento na demanda de diversos serviços relacionados a manutenção destes tipos de sistema. Um Item de grande importância da norma ressalta a importância da garantia da qualidade de resultados de ensaio, uma maneira de se verificar isto é através da participação em um tipo de ensaio interlaboratorial conhecido como programa de ensaio de proficiência ou EP. Este tipo de serviços apresentou um crescimento considerável em sua demanda, especialmente no território nacional, devido a um requisito do próprio INMETRO presente na NIT DICLA-026, o qual exige que um laboratório participe de um EP para que o mesmo se torne elegível a obter a sua acreditação em ISO 17025:2005. Com o aumento em sua demanda, surge o interesse por parte dos provedores de ensaios de proficiência de otimizar seus processos sem que os requisitos da qualidade sejam comprometidos. Uma maneira de se atingir este objetivo é através da modernização de seus sistemas de armazenamento de informação e cálculos para um sistema computadorizado. Entretanto o mercado não apresenta ferramentas especialmente desenvolvidas para esta finalidade, e as utilizadas para isto não apresentam todas as características exigidas pelas normas ISO 17025:2005 e ISO 17043:2011 e, para serem utilizadas neste tipo de ambiente, exigem longos processos de avaliação e validação dos sistemas atuais. Em muitos casos o usuário é forçado a utilizar múltiplos softwares ao longo do processo, tornando todo o processo ainda mais passível de erros e, em casos extremos, gerando erros na apresentação de resultados finais. Portanto, surge a necessidade do desenvolvimento de uma ferramenta computacional especializada e desenvolvida com o foco neste tipo especifico de laboratório, atendendo aos requisitos normativos e trazendo características úteis para uma melhor otimização do processo. / The growth in the number of laboratories certified in the ISO 17025:2005 triggered, therefore, an increase in the demand for several services related to the maintenance of these kinds of systems. One very important topic in the standard emphasizes on the importance of the assurance of the quality of the result obtained, which may be verified by participating in a type of interlaboratory tests known as proficiency testing programs or PT. These types of services have grown considerably in demand., especially in the national territory, due to a requirement of INMETRO present on the standard NIT DICLA-026, which demands that laboratories take place on EP to become eligible for an accreditation in ISO 17025:2005. With its increase in demand, it becomes more interesting for proficiency test providers to optimize their systems all the while without compromising their quality, one of the ways of achieving this objective is through and upgrade on their information storage systems and calculation systems to a computerized one. However, the market does not feature specialized tools developed for this specific task, and the ones being used for this goal do not feature all of the characteristics required by the ISO 17025:2005 and ISO 17043:2011 standards, and, therefore, require a long process of evaluation and validation for being used in this type of environment. In a lot of cases its also common that the enterprise is forced to use multiple software\'s throughout the process, making the entire process more susceptible to mistakes and in extreme cases even generating mistakes that might be present on the end results sent to the client. Therefore, the necessity of developing a specialized computer tool arises, one developed focused specifically on these types of laboratories, complying with every requirement made by the standard and bringing with it useful features for a better optimization of the process.

[pt] O objetivo dessa dissertação é propor protocolos estatísticos alternativos ao atual praticado pela American Society for Testing and Materials (ASTM) para a determinação do desempenho dos laboratórios participantes de Ensaios de Proficiência (EP) utilizando estatística robusta. A participação em EP é um requisito compulsório à conformidade nas certificações e acreditações para laboratórios de ensaio e calibração. O Programa de EP da ASTM considera o valor de consenso para prover os escores dos participantes. O modelo para estimar os escores, ZASTM, se baseia na média amostral (valor designado, VD) e no desvio padrão amostral (desvio padrão para a proficiência, DPP). Neste cenário, há necessidade de tratamento exaustivo dos dados, motivação para este estudo, incluindo o tratamento de outliers e a investigação de existência de distribuição normal (Gaussiana). Neste estudo, os protocolos propostos (nIQR e MADe) consideram o emprego de estatísticas robustas, mais resistentes à presença de outliers, os quais ocasionam desvios da normalidade desejada. Os resultados da comparação do protocolo ASTM com os protocolos propostos, em dados da matriz de óleos lubrificantes, reportados ao provedor ASTM, revelam haver diferença entre as médias ou entre as variâncias dos escores produzidos pelos diferentes protocolos ao nível de 5 porcento de significância, ocasionando mudança na classificação do desempenho dos laboratórios. Conclui-se que os protocolos estatísticos alternativos propostos apresentaram a vantagem de dispensar o tratamento de outliers e a investigação da distribuição dos dados, sendo que o protocolo MADe ainda apresentou redução na incerteza de medição associada ao valor designado por consenso. / [en] The objective of this dissertation is to propose statistical protocols that are alternative to the current one applied by the American Society for Testing and Materials (ASTM) to determine the performance of participants laboratories of Proficiency Testing (PT) by using robust statistics. Participation in PT is a mandatory requirement for compliance in certifications and accreditations for testing and calibration laboratories. The ASTM EP Program employs the consensus value to provide the participants scores. The method for estimating the scores, ZASTM, is based on the sample data mean (assigned value, AV) and the sample data standard deviation (standard deviation for proficiency assesment, SDPA). In this case, it is necessary an exhaustive treating of the data, motivation for this study, including the treatment of outliers and the investigation of existence of normal distribution (Gaussian). In this study, the proposed protocols (nIQR and MADe) consider the application of robust statistics, which are more resistant to the presence of outliers, which cause deviations from the desired normality. The results of the ASTM protocol comparison with the proposed protocols in the lubricant oil matrix data reported to the ASTM provider show a difference between the means or between the variances of the scores produced by the different protocols at the 5 per cent level of significance, causing variation in the classification of laboratory performance. It is concluded that the proposed alternative statistical protocols had the advantage of dispensing the outliers treatment and the investigation of the data distribution, and the MADe protocol still showed reduction in the measurement

Os ensaios de proficiência têm sido utilizados, por laboratórios de ensaio e calibração acreditados sob a norma ISO/IEC 17025 (General requirements for the competence of testing and calibration laboratories), como principal mecanismo para garantia da qualidade de seus resultados. Além de atender a um requisito normativo, a participação satisfatória neste tipo de atividade é utilizada, por organismos acreditadores, como condição à obtenção e manutenção da acreditação. Entretanto, existe uma carência por provedores de ensaios de proficiência acreditados de acordo com a norma ISO/IEC 17043 (Conformity assessment — General requirements for proficiency testing), o que causa dificuldades aos laboratórios. Esta dissertação teve como objetivo analisar a viabilidade de que laboratórios acreditados à ISO/IEC 17025 atuem, simultaneamente, como provedores de ensaios de proficiência, acreditados à ISO/IEC 17043. Para isso, foram estabelecidas as relações entre os itens das normas, identificadas e analisadas as exigências adicionais e adaptações necessárias no sistema de gestão, identificados os potenciais conflitos de interesses e estabelecidas propostas de atendimento para cada item normativo afetado. Os artigos que constituem esta pesquisa foram validados por um grupo de especialistas na área da metrologia, sendo as suas opiniões consideradas nos estudos realizados. Conclui-se, ao final, que a atuação simultânea proposta é viável, exigindo adaptações no sistema de gestão e procedimentos complementares referentes à confidencialidade e à imparcialidade. Como resultado prático, espera-se minimizar a carência por este serviço, sem comprometer sua confiabilidade. / Proficiency tests have been used by testing and calibration laboratories accredited to the ISO/IEC 17025 standard (General requirements for the competence of testing and calibration laboratories) as the main mechanism for assuring the quality of their results. Besides attending to a normative requirement, the satisfactory participation in this kind of activity is used by accreditation bodies as a condition to obtaining and maintaining the accreditation. However, there is a lack of proficiency testing providers accredited according to the ISO/IEC 17043 standard (Conformity assessment — General requirements for proficiency testing), which causes laboratories to have difficulties. This thesis had as its goal to analyze the viability of laboratories accredited to the ISO/IEC 17025 acting simultaneously as proficiency testing providers, accredited to the ISO/IEC 17043. For that, relations between the items of both standards have been established, additional requirements and necessary adaptations in the management system have been identified and analyzed, potential conflicts of interest have been identified and solutions have been proposed for each normative item. A group of experts in the field of metrology validated the articles that constitute this research and their opinions have been considered in the studies. At the end, the conclusion was that the proposed simultaneous acting is viable, requiring adaptations in the management system and complementary procedures referring to confidentiality and impartiality. As a practical result, it is hoped to minimize the shortage for this kind of service, without compromising its reliability.

A implantação de Sistemas de Gestão da Qualidade em ambiente laboratorial vem se tornando uma necessidade frequente, devido à demanda dos clientes por resultados confiáveis e rastreáveis. No Brasil, a Coordenação Geral de Acreditação do Inmetro (Cgcre) é o órgão responsável pela acreditação de laboratórios segundo a NBR ISO/IEC 17025, sendo o Laboratório de Metalurgia Física (LAMEF) da Universidade Federal do Rio Grande do Sul acreditado para a realização de ensaios de materiais metálicos desde 2010. Em 2013, tendo passado por um processo de aumento de escopo de acreditação para os ensaios mecânicos, evidenciou-se o não atendimento ao item de garantia da qualidade da NBR ISO/IEC 17025 e da NIT-DICLA-026. Para atender aos requisitos, foram conduzidas análises através de Ensaios de Proficiência e por monitoramento interno da qualidade pelos métodos do Erro Normalizado e de Análise de Variância. Quando identificados desvios dos critérios de aceitação, ações corretivas foram tomadas, visando a melhoria contínua dos sistemas de medição. Os resultados do trabalho demonstraram que a implantação sistemática de métodos estatísticos para o monitoramento da qualidade dos ensaios foi fundamental para o processo de aumento do escopo de acreditação do LAMEF, o qual foi consolidado no início de 2014. / The implementation of Quality Management Systems in laboratory environment is being an increasing necessity, due to customer demand for reliable and traceable test results. The General Coordination for Accreditation of Inmetro (Cgcre/Inmetro) is the Brazilian body responsible for the accreditation of laboratories according to ISO/IEC 17025 standard, and the Physical Metallurgy Laboratory (LAMEF) from the Federal University of Rio Grande do Sul (UFRGS) has been accredited in performance of metallic materials tests since 2010. In 2013, during the process of accreditation scope extension on mechanical testing, there were identified nonconformities to the quality assurance requirements of ISO/IEC 17025 and NIT-DICLA-026. In order to comply with these requirements, studies have been carried out through Proficiency Testing and internal quality monitoring via Normalized Error and Analysis of Variance methods. Corrective actions were taken when deviations from the acceptance criteria were identified, aiming the measurement systems continuous improvement. The results of this work have demonstrated that the systematic implementation of statistical methods for monitoring the testing quality was critical to the process of LAMEF extension of scope, which was consolidated in the early 2014.

Os ensaios de proficiência têm sido utilizados, por laboratórios de ensaio e calibração acreditados sob a norma ISO/IEC 17025 (General requirements for the competence of testing and calibration laboratories), como principal mecanismo para garantia da qualidade de seus resultados. Além de atender a um requisito normativo, a participação satisfatória neste tipo de atividade é utilizada, por organismos acreditadores, como condição à obtenção e manutenção da acreditação. Entretanto, existe uma carência por provedores de ensaios de proficiência acreditados de acordo com a norma ISO/IEC 17043 (Conformity assessment — General requirements for proficiency testing), o que causa dificuldades aos laboratórios. Esta dissertação teve como objetivo analisar a viabilidade de que laboratórios acreditados à ISO/IEC 17025 atuem, simultaneamente, como provedores de ensaios de proficiência, acreditados à ISO/IEC 17043. Para isso, foram estabelecidas as relações entre os itens das normas, identificadas e analisadas as exigências adicionais e adaptações necessárias no sistema de gestão, identificados os potenciais conflitos de interesses e estabelecidas propostas de atendimento para cada item normativo afetado. Os artigos que constituem esta pesquisa foram validados por um grupo de especialistas na área da metrologia, sendo as suas opiniões consideradas nos estudos realizados. Conclui-se, ao final, que a atuação simultânea proposta é viável, exigindo adaptações no sistema de gestão e procedimentos complementares referentes à confidencialidade e à imparcialidade. Como resultado prático, espera-se minimizar a carência por este serviço, sem comprometer sua confiabilidade. / Proficiency tests have been used by testing and calibration laboratories accredited to the ISO/IEC 17025 standard (General requirements for the competence of testing and calibration laboratories) as the main mechanism for assuring the quality of their results. Besides attending to a normative requirement, the satisfactory participation in this kind of activity is used by accreditation bodies as a condition to obtaining and maintaining the accreditation. However, there is a lack of proficiency testing providers accredited according to the ISO/IEC 17043 standard (Conformity assessment — General requirements for proficiency testing), which causes laboratories to have difficulties. This thesis had as its goal to analyze the viability of laboratories accredited to the ISO/IEC 17025 acting simultaneously as proficiency testing providers, accredited to the ISO/IEC 17043. For that, relations between the items of both standards have been established, additional requirements and necessary adaptations in the management system have been identified and analyzed, potential conflicts of interest have been identified and solutions have been proposed for each normative item. A group of experts in the field of metrology validated the articles that constitute this research and their opinions have been considered in the studies. At the end, the conclusion was that the proposed simultaneous acting is viable, requiring adaptations in the management system and complementary procedures referring to confidentiality and impartiality. As a practical result, it is hoped to minimize the shortage for this kind of service, without compromising its reliability.

A implantação de Sistemas de Gestão da Qualidade em ambiente laboratorial vem se tornando uma necessidade frequente, devido à demanda dos clientes por resultados confiáveis e rastreáveis. No Brasil, a Coordenação Geral de Acreditação do Inmetro (Cgcre) é o órgão responsável pela acreditação de laboratórios segundo a NBR ISO/IEC 17025, sendo o Laboratório de Metalurgia Física (LAMEF) da Universidade Federal do Rio Grande do Sul acreditado para a realização de ensaios de materiais metálicos desde 2010. Em 2013, tendo passado por um processo de aumento de escopo de acreditação para os ensaios mecânicos, evidenciou-se o não atendimento ao item de garantia da qualidade da NBR ISO/IEC 17025 e da NIT-DICLA-026. Para atender aos requisitos, foram conduzidas análises através de Ensaios de Proficiência e por monitoramento interno da qualidade pelos métodos do Erro Normalizado e de Análise de Variância. Quando identificados desvios dos critérios de aceitação, ações corretivas foram tomadas, visando a melhoria contínua dos sistemas de medição. Os resultados do trabalho demonstraram que a implantação sistemática de métodos estatísticos para o monitoramento da qualidade dos ensaios foi fundamental para o processo de aumento do escopo de acreditação do LAMEF, o qual foi consolidado no início de 2014. / The implementation of Quality Management Systems in laboratory environment is being an increasing necessity, due to customer demand for reliable and traceable test results. The General Coordination for Accreditation of Inmetro (Cgcre/Inmetro) is the Brazilian body responsible for the accreditation of laboratories according to ISO/IEC 17025 standard, and the Physical Metallurgy Laboratory (LAMEF) from the Federal University of Rio Grande do Sul (UFRGS) has been accredited in performance of metallic materials tests since 2010. In 2013, during the process of accreditation scope extension on mechanical testing, there were identified nonconformities to the quality assurance requirements of ISO/IEC 17025 and NIT-DICLA-026. In order to comply with these requirements, studies have been carried out through Proficiency Testing and internal quality monitoring via Normalized Error and Analysis of Variance methods. Corrective actions were taken when deviations from the acceptance criteria were identified, aiming the measurement systems continuous improvement. The results of this work have demonstrated that the systematic implementation of statistical methods for monitoring the testing quality was critical to the process of LAMEF extension of scope, which was consolidated in the early 2014.