This study introduces an automated evaluation method for large language model (LLM) based chatbots in educational settings, utilizing LLM-as-a-Judge to assess their performance. Our results demonstrate the efficacy of this approach in evaluating the accuracy of three LLM-based chatbots (Llama 3 70B, ChatGPT 4, Gemini Advanced) across two subjects: history and biology. The analysis reveals promising performance across different subjects. On a scale from 1 to 5 describing the correctness of the judge itself, the LLM judge’s average scores for correctness when evaluating each chatbot on history related questions are 3.92 (Llama 3 70B), 4.20 (ChatGPT 4), 4.51 (Gemini Advanced); for biology related questions, the average scores are 4.04 (Llama 3 70B), 4.28 (ChatGPT 4), 4.09 (Gemini Advanced). This underscores the potential of leveraging the LLM-as-a-judge strategy to evaluate the correctness of responses from other LLMs.

<p dir="ltr">Neurological disorders present a considerable challenge due to their variety and diagnostic complexity especially for older adults. Early prediction of the onset and ongoing assessment of the severity of these disease conditions can allow timely interventions. Currently, most of the assessment tools are time-consuming, costly, and not suitable for use in primary care. To reduce this burden, the present thesis introduces passive digital markers for different disease conditions that can effectively automate the severity assessment and risk prediction from different modalities of electronic health records (EHR). The focus of the first phase of the present study in on developing passive digital markers for the functional assessment of patients suffering from Bipolar disorder and Schizophrenia. The second phase of the study explores different architectures for passive digital markers that can predict patients at risk for dementia. The functional severity PDM uses only a single EHR modality, namely medical notes in order to assess the severity of the functioning of schizophrenia, bipolar type I, or mixed bipolar patients. In this case, the input of is a single medical note from the electronic medical record of the patient. This note is submitted to a hierarchical BERT model which classifies at-risk patients. A hierarchical attention mechanism is adopted because medical notes can exceed the maximum allowed number of tokens by most language models including BERT. The functional severity PDM follows three steps. First, a sentence-level embedding is produced for each sentence in the note using a token-level attention mechanism. Second, an embedding for the entire note is constructed using a sentence-level attention mechanism. Third, the final embedding is classified using a feed-forward neural network which estimates the impairment level of the patient. When used prior to the onset of the disease, this PDM is able to differentiate between severe and moderate functioning levels with an AUC of 76%. Disease-specific severity assessment PDMs are only applicable after the onset of the disease and have AUCs of nearly 85% for schizophrenia and bipolar patients. The dementia risk prediction PDM considers multiple EHR modalities including socio-demographic data, diagnosis codes and medical notes. Moreover, the observation period and prediction horizon are varied for a better understanding of the practical limitations of the model. This PDM is able to identify patients at risk of dementia with AUCs ranging from 70% to 92% as the observation period approaches the index date. The present study introduces methodologies for the automation of important clinical outcomes such as the assessment of the general functioning of psychiatric patients and the prediction of risk for dementia using only routine care data.</p>

[EN] Laser-induced incandescence (LII) is an optical diagnostic technique that can be used to measure the concentration and primary-particle size distributions of soot with high selectivity. This technique consists of rapid particle heating from the local ambient temperature to close to the soot sublimation temperature (~4000 K) by means of a highly energetic laser source, and the immediate recording of the strong thermal radiation as a result of a complex heat and mass transfer balance. The aim of this work is to develop an experimental methodology for measuring the soot concentration in diesel flames by means of laser-induced incandescence. The development of the methodology consists of two main parts. The first focuses on the calibration of the laser-induced incandescence signal in a laminar diffusion flame under atmospheric conditions, by using the light extinction method as a reference technique. This calibration allows for quantitative values of the concentration of soot. Along with LII measurements, simultaneous laser elastic-scattering measurements (LES) were obtained, which allowed the calculation of the maps of probability, number and relative particle diameter. For this purpose, different algorithms and corrections by digital image processing were developed. This research has also made use of a theoretical model for the LII signal with the intention of developing an adequate interpretation of the images inside the combustion chamber, identify the main limitations of the technique and propose the necessary corrections under different experimental conditions. The second part is an experimental study of the soot concentration field in a turbulent diesel flame. In this case, an experimental set-up that reproduces the thermodynamic conditions of a diesel engine was used. By strictly following the methodology developed in the first part, along with the adjustments and corrections for high-pressure systems such as compression-ignition engines, a series of parametric studies were carried out in order to characterise the effects of variations in fuel injection pressure, thermodynamic properties of air and nozzle diameter on the soot concentration distribution and its relationship with the flame structure. In this analysis, results from other optical techniques have been used, in order to understand the phenomena that determine the processes of formation and soot oxidation in turbulent flames. / [ES] La técnica de incandescencia inducida por láser (LII) es una herramienta de diagnóstico óptico que permite la medición directa de la concentración, tamaño y distribución de partículas de hollín. Esta técnica consiste en la detección de la señal de alta incandescencia emitida por las partículas de hollín que al ser calentadas mediante el uso pulsos láseres altamente energéticos, aumentan su temperatura hasta alcanzar temperaturas cercanas al punto de sublimación del hollín (~4000 K) como consecuencia de la absorción de energía y de un complejo balance de calor y masa. El objetivo de esta Tesis Doctoral consiste en desarrollar una metodología experimental para la medida de los campos de concentración de hollín en llamas Diesel mediante la técnica de incandescencia inducida por láser. El desarrollo de la metodología se compone de dos partes fundamentales. La primera de ellas se centra en la calibración de la señal de incandescencia inducida por láser en un llama de difusión laminar en condiciones atmosféricas, utilizando como referencia el método de extinción de luz. Esta calibración permite obtener valores cuantitativos de la concentración de hollín. Conjuntamente con las medidas de LII, se han obtenido medidas de la dispersión elástica de Rayleigh (LES), lo que ha permitido el cálculo de los mapas de probabilidad, número y diámetro relativo de partículas. Para este propósito se han tenido que desarrollar diferentes algoritmos y correcciones mediante procesado digital de imágenes. En esta investigación también se ha hecho uso de un modelo teórico de la señal de incandescencia para la correcta interpretación de las imágenes en la cámara de combustión, conocer sus limitaciones y proponer las correcciones necesarias bajo diferentes condiciones experimentales. La segunda parte corresponde a las medidas de concentraciones de hollín en una llama turbulenta Diesel. En este caso, se ha utilizado una instalación experimental que permite reproducir las condiciones termodinámicas de un motor Diesel. Mediante el seguimiento estricto de la metodología desarrollada en la primera parte, y con las adaptaciones y correcciones correspondientes a sistemas de alta presión como lo son los motores de encendido por compresión, se ha realizado una serie de estudios paramétricos con el fin de caracterizar los efectos en las variaciones de la presión de inyección de combustible, propiedades termodinámicas del aire y diámetro de tobera sobre los mapas de concentración de hollín. En el análisis de resultados se han utilizado otras técnicas ópticas, con el fin de comprender los fenómenos que determinan los procesos de formación y oxidación de hollín en llamas turbulentas. / [CA] La tècnica d'incandescència induïda per làser (LII) és una ferramenta de diagnòstic òptic que permet el mesurament directe de la concentració, grandària i distribució de partícules de sutja. Esta tècnica consistix en la detecció del senyal d'alta incandescència emesa per les partícules de sutja que al ser calfades per mitjà de l'ús polsos láseres altament energètics, augmenten la seua temperatura fins a aconseguir temperatures pròximes al punt de sublimació de la sutja (~4000 K) com a conseqüència de l'absorció d'energia i d'un complex balanç de calor i massa. L'objectiu d'esta Tesi Doctoral consistix a desenrotllar una metodologia experimental per a la mesura dels camps de concentració de sutja en flames Dièsel per mitjà de la tècnica d'incandescència induïda per làser. El desenrotllament de la metodologia es compon de dos parts fonamentals. La primera d'elles se centra en la calibratge del senyal d'incandescència induïda per làser en un flama de difusió laminar en condicions atmosfèriques, utilitzant com a referència el mètode d'extinció de llum. Esta calibratge permet obtindre valors quantitatius de la concentració de sutja. Conjuntament amb les mesures de LII, s'han obtingut mesures de la dispersió elàstica de Rayleigh (LES) , la qual cosa ha permés el càlcul dels mapes de probabilitat, número i diàmetre relatiu de partícules. Per a este propòsit s'han hagut de desenrotllar diferents algoritmes i correccions per mitjà de processat digital d'imatges. En esta investigació també s'ha fet ús d'un model teòric del senyal d'incandescència per a la correcta interpretació de les imatges en la cambra de combustió, conéixer les seues limitacions i proposar les correccions necessàries davall diferents condicions experimentals. La segona part correspon a les mesures de concentracions de sutja en una flama turbulenta Dièsel. En este cas, s'ha utilitzat una instal-lació experimental que permet reproduir les condicions termodinàmiques d'un motor Dièsel. Per mitjà del seguiment estricte de la metodologia desenrotllada en la primera part, i amb les adaptacions i correccions corresponents a sistemes d'alta pressió com ho són els motors d'encesa per compressió, s'ha realitzat una sèrie d'estudis paramètrics a fi de caracteritzar els efectes en les variacions de la pressió d'injecció de combustible, propietats termodinàmiques de l'aire i diàmetre de tovera sobre els mapes de concentració de sutja. En l'anàlisi de resultats s'han utilitzat altres tècniques òptiques, a fi de comprendre els fenòmens que determinen els processos de formació i oxidació de sutja en flames turbulentes. / Buitrago García, JE. (2016). CARACTERIZACIÓN EXPERIMENTAL DE LA CONCENTRACIÓN DE HOLLÍN EN LLAMAS DIESEL MEDIANTE INCANDESCENCIA INDUCIDA POR LÁSER [Tesis doctoral]. Universitat Politècnica de València. https://doi.org/10.4995/Thesis/10251/62355

Tesis por compendio / [ES] El objetivo principal de esta tesis es establecer una metodología para predecir el consumo de combustible y las emisiones de un motor de encendido por compresión en condiciones transitorias. Además, su objetivo es explorar cómo las diferentes configuraciones del motor y los factores ambientales impactan el comportamiento del motor utilizando un enfoque de modelado 0D/1D. Además, el estudio pretende extender esta metodología a los motores duales, analizando específicamente las características de combustión de metano-diésel e hidrógeno-diésel. Para lograrlo, la herramienta de modelado 0D/1D se ajustó y validó meticulosamente utilizando un motor diésel de cuatro cilindros. Esta alineación entre la simulación y datos experimentales se centró especialmente en factores cruciales como la presión, la liberación de calor, las temperaturas en los fluidos del motor y el par. Se realizó un análisis exhaustivo del Balance Energético Global (GEB) utilizando VEMOD (Virtual Engine Model). Este análisis proporcionó información detallada sobre el consumo del motor y su reacción en diversas condiciones de funcionamiento, particularmente durante el Ciclo de ensayo mundial armonizado de vehículos ligeros (WLTC). La comparación de términos energéticos entre diferentes condiciones ambientales y de motor destacó aspectos como la fricción, la transferencia de calor y la acumulación de calor. Además, el análisis GEB permitió explorar cómo se distribuía la energía con diferentes temperaturas y altitudes ambientes. El estudio también evaluó las emisiones de NOx, revelando patrones influenciados por factores como las tasas de recirculación de gases de escape (EGR) y la temperatura de admisión. En el ámbito de los motores de combustible dual, se elaboró y validó un modelo de combustión utilizando la herramienta de simulación 0D/1D. La atención inicial se centró en la combustión de metano-Diesel, validada con datos experimentales. Posteriormente, el alcance de este modelo se amplió para simular la combustión de hidrógeno-Diesel. Esta tesis ha introducido con éxito una metodología que utiliza VEMOD para predecir el consumo y las emisiones del motor en distintos escenarios. El análisis exhaustivo arrojó luz sobre cómo funcionan los mecanismos de distribución de energía y cómo diferentes factores influyen en el comportamiento del motor. La aplicación de esta metodología a motores de encendido por compresión ha demostrado su versatilidad y capacidad de predicción, lo que la convierte en una herramienta valiosa para investigar escenarios futuros, también con combustiones duales. / [CA] L'objectiu principal d'aquesta tesi és establir una metodologia per predir el consum de combustible i les emissions d'un motor d'encesa per compressió en condicions transitòries. A més, pretén explorar com diferents configuracions de motors i factors ambientals afecten el comportament del motor mitjançant un enfocament de modelització 0D/1D. A més, l'estudi s'esforça a estendre aquesta metodologia als motors de doble combustible (duals), analitzant específicament les característiques de combustió de metà-dièsel i hidrogendièsel. Per aconseguir-ho, l'eina de modelització 0D/1D es va ajustar minuciosament i es va validar mitjançant un motor dièsel de quatre cilindres. Aquesta alineació entre dades de simulació i món real es va centrar especialment en factors crucials com la pressió, l'alliberament de calor, les temperatures dels fluids del motor i el parell. Es va realitzar una anàlisi completa del Balanç Global d'Energia (GEB) mitjançant VEMOD (Virtual Engine Model). Aquesta anàlisi va proporcionar una visió profunda sobre el consum del motor i la seua reacció en diverses condicions de funcionament, especialment durant el Cicle mundial d'assaig de vehicles lleugers harmonitzats (WLTC). La comparació de termes energètics entre diferents condicions ambientals i del motor van posar de manifest aspectes com la fricció, la transferència de calor i l'acumulació de calor. A més, l'anàlisi GEB va explorar com es va distribuir l'energia amb diferents temperatures i altituds ambientals. L'estudi també va valorar les emissions de NOx, revelant patrons influenciats per factors com la recirculació de gasos d'escapament (EGR) i la temperatura d'admissió. En l'àmbit dels motors duals, es va elaborar i validar un model de combustió mitjançant l'eina de simulació 0D/1D. El focus inicial es va centrar en la combustió metà-Diesel, validada amb dades experimentals. Posteriorment, l'abast d'aquest model es va ampliar per simular la combustió hidrogen-Diesel. Aquesta tesi ha introduït amb èxit una metodologia que utilitza VEMOD per predir el consum i les emissions del motor en diferents escenaris. L'anàlisi completa va donar llum a com funcionen els mecanismes de distribució d'energia i com diferents factors influeixen en el comportament del motor. L'aplicació d'aquesta metodologia als motors d'encesa per compressió va demostrar la seva versatilitat i capacitats de predicció, convertint-la en una valuosa eina per investigar els futurs escenaris, fins i tot amb combustions duals. / [EN] The main aim of this thesis is to establish a methodology for predicting fuel consumption and emissions of a compression ignition engine in transient conditions. Additionally, it aims to explore how different engine setups and environmental factors impact the engine's performance using a 0D/1D modelling approach. Moreover, the study strives to extend this methodology to dual fuel engines, specifically analysing methane-Diesel and hydrogen- Diesel combustion characteristics. The 0D/1D modelling tool was meticulously fine-tuned and validated using a four-cylinder Diesel engine to achieve this. This alignment between simulation and experimental data focused on crucial factors such as pressure, heat release, engine fluid temperatures and torque. A comprehensive Global Energy Balance (GEB) analysis was conducted using VEMOD (Virtual Engine Model). This analysis provided insights into the engine consumption and performance under diverse operating conditions, particularly during the Worldwide Harmonized Light Vehicles Test Cycle (WLTC). The comparison of energy terms across different engine and boundary conditions highlighted aspects such as friction, heat rejection, and heat accumulation. Additionally, the GEB analysis allowed exploration of how energy was split across varying ambient temperatures and altitudes. The study also assessed NOx emissions, revealing patterns influenced by factors such as Exhaust Gas Recirculation (EGR) rates and intake temperature. A combustion model was developed and validated using the 0D/1D simulation tool in the scope of dual fuel engines. The initial focus was on methane-Diesel combustion, validated against experimental data. Subsequently, this model scope was expanded to simulate hydrogen-Diesel combustion. This thesis has successfully introduced a methodology based on VEMOD to predict engine consumption and emissions across varying scenarios. The comprehensive analysis illuminated how energy distribution mechanisms operate and how factors influence engine performances. The application of this methodology to compression ignition engines demonstrated its versatility and prediction capabilities, making it a valuable tool for investigating future combustion scenarios, including dual fuel operation. / This research has been partially funded by the European Union’s Horizon 2020 Framework Programme for research, technological development and demonstration under grant agreement 723976 (“DiePeR”) and by the Spanish government under the grant agreement TRA2017-89894-R (”MECOEM”) and I was supported by FPI grant with reference PRE2018-084411. / Artham, S. (2023). Contribution to the simulation of new standard testing cycles by means of a 0D/1D tool [Tesis doctoral]. Universitat Politècnica de València. https://doi.org/10.4995/Thesis/10251/201238 / Compendio