<p>The detection of anomalies in real-world networks is applicable in different domains; the application includes, but is not limited to, credit card fraud detection, malware identification and classification, cancer detection from diagnostic reports, abnormal traffic detection, identification of fake media posts, and the like. Many ongoing and current researches are providing tools for analyzing labeled and unlabeled data; however, the challenges of finding anomalies and patterns in large-scale datasets still exist because of rapid changes in the threat landscape. </p><p>In this study, I implemented a novel and robust solution that combines data science and cybersecurity to solve complex network security problems. I used Long Short-Term Memory (LSTM) model, Louvain algorithm, and PageRank algorithm to identify and group anomalies in large-scale real-world networks. The network has billions of packets. The developed model used different visualization techniques to provide further insight into how the anomalies in the network are related. </p><p>Mean absolute error (MAE) and root mean square error (RMSE) was used to validate the anomaly detection models, the results obtained for both are 5.1813e-04 and 1e-03 respectively. The low loss from the training phase confirmed the low RMSE at loss: 5.1812e-04, mean absolute error: 5.1813e-04, validation loss: 3.9858e-04, validation mean absolute error: 3.9858e-04. The result from the community detection shows an overall modularity value of 0.914 which is proof of the existence of very strong communities among the anomalies. The largest sub-community of the anomalies connects 10.42% of the total nodes of the anomalies. </p><p>The broader aim and impact of this study was to provide sophisticated, AI-assisted countermeasures to cyber-threats in large-scale networks. To close the existing gaps created by the shortage of skilled and experienced cybersecurity specialists and analysts in the cybersecurity field, solutions based on out-of-the-box thinking are inevitable; this research was aimed at yielding one of such solutions. It was built to detect specific and collaborating threat actors in large networks and to help speed up how the activities of anomalies in any given large-scale network can be curtailed in time.</p><div><div><div> </div> </div> </div> <br>

O presente trabalho descreve o desenvolvimento e implementação de duas configurações distintas de um receptor optoeletrônico integrado. A primeira configuração é similar a um projeto encontrado na literatura mas apresenta diversas modificações que lhe conferiram melhor desempenho em comparação ao projeto original. A segunda configuração é uma nova proposta deste trabalho. O receptor foi desenvolvido e implementado visando sua aplicação em redes de comunicações ópticas passivas (PONs) de alta velocidade comutadas a pacote, para possibilitar a utilização da técnica de multiplexação em comprimento de onda (WDM), aumentando assim a capacidade de transmissão da rede, em particular no ramo de ligação da rede de serviços com o usuário final, denominado rede de acesso. O principal objetivo do receptor aqui desenvolvido foi proporcionar uma sintonia rápida entre os canais disponíveis na rede, possibilitando sua seleção num tempo inferior àquele necessário para a transmissão de um único pacote de informação, diminuindo assim o atraso de sintonia e, por conseguinte, a perda de informação. Para tanto, os circuitos integrados implementados e caracterizados referem-se aos circuitos de chaveamento eletrônico e do amplificador de transimpedância das duas configurações investigadas. Os dados experimentais obtidos para as duas configurações confirmaram a previsão de chaveamento dos canais de entrada num intervalo de tempo da ordem de alguns nanosegundos, o que é totalmente compatível com a velocidade de transmissão das aplicações a que se destina este receptor (aproximadamente 5 Gbits/s). Adicionalmente, são apresentados os dados experimentais relativos à freqüência de corte, ganho direto, isolação, relação on/off e características de ruído dos circuitos implementados. / The present work describes the design and implementation of two configurations of an integrated optoelectronic receiver. The first one is similar to a previously reported design but with some modifications to improve its performance. The second one is a new proposal of this work. The goal of the receiver design and implementation was its application in high bit rate packet-switched passive optical networks (PONs) employing the wavelength division multiplexing (WDM) technique to increase the network capacity, in particular on the connection branch of the network core with the final user, the access network. The main goal of the receiver design was to achieve a fast channel tuning, allowing a tuning time smaller than the required for the transmission of a single information packet, decreasing the tuning latency and, therefore, the rate of information packet loss. In order to accomplish this goal, the implemented and tested integrated circuits include the electronic switching circuit and the transimpedance amplifier for both configurations investigated. The measured data for both configurations confirm the expected input channel switching time results, of about a few nanoseconds, which is certainly useful for the expected bit rate of operation (approximate 5 Gbps). Additionally, experimental results concerning cutoff frequency and bandwidth, direct gain, isolation, on/off ratio, and noise characteristics of both implemented circuits are presented.

Thesis (Master').

O presente trabalho descreve o desenvolvimento e implementação de duas configurações distintas de um receptor optoeletrônico integrado. A primeira configuração é similar a um projeto encontrado na literatura mas apresenta diversas modificações que lhe conferiram melhor desempenho em comparação ao projeto original. A segunda configuração é uma nova proposta deste trabalho. O receptor foi desenvolvido e implementado visando sua aplicação em redes de comunicações ópticas passivas (PONs) de alta velocidade comutadas a pacote, para possibilitar a utilização da técnica de multiplexação em comprimento de onda (WDM), aumentando assim a capacidade de transmissão da rede, em particular no ramo de ligação da rede de serviços com o usuário final, denominado rede de acesso. O principal objetivo do receptor aqui desenvolvido foi proporcionar uma sintonia rápida entre os canais disponíveis na rede, possibilitando sua seleção num tempo inferior àquele necessário para a transmissão de um único pacote de informação, diminuindo assim o atraso de sintonia e, por conseguinte, a perda de informação. Para tanto, os circuitos integrados implementados e caracterizados referem-se aos circuitos de chaveamento eletrônico e do amplificador de transimpedância das duas configurações investigadas. Os dados experimentais obtidos para as duas configurações confirmaram a previsão de chaveamento dos canais de entrada num intervalo de tempo da ordem de alguns nanosegundos, o que é totalmente compatível com a velocidade de transmissão das aplicações a que se destina este receptor (aproximadamente 5 Gbits/s). Adicionalmente, são apresentados os dados experimentais relativos à freqüência de corte, ganho direto, isolação, relação on/off e características de ruído dos circuitos implementados. / The present work describes the design and implementation of two configurations of an integrated optoelectronic receiver. The first one is similar to a previously reported design but with some modifications to improve its performance. The second one is a new proposal of this work. The goal of the receiver design and implementation was its application in high bit rate packet-switched passive optical networks (PONs) employing the wavelength division multiplexing (WDM) technique to increase the network capacity, in particular on the connection branch of the network core with the final user, the access network. The main goal of the receiver design was to achieve a fast channel tuning, allowing a tuning time smaller than the required for the transmission of a single information packet, decreasing the tuning latency and, therefore, the rate of information packet loss. In order to accomplish this goal, the implemented and tested integrated circuits include the electronic switching circuit and the transimpedance amplifier for both configurations investigated. The measured data for both configurations confirm the expected input channel switching time results, of about a few nanoseconds, which is certainly useful for the expected bit rate of operation (approximate 5 Gbps). Additionally, experimental results concerning cutoff frequency and bandwidth, direct gain, isolation, on/off ratio, and noise characteristics of both implemented circuits are presented.