Writing the speculative fiction novel, Birthright, and this accompanying exegesis, led me to challenge the validity of the disclaimer usually found in the front matter of most novels that the story is purely imaginary, bears no relationship to reality, with the characters not being inspired by anyone known or unknown to the author. For the first time in my career, I began to consider how writers including myself might frequently revisit themes and ideas which resonate with our lived experiences. I call this restorying, an unconscious process whereby aspects of one's life history are rewritten through one's creative work to achieve a more satisfactory result. Through personal contact, studying authors' accounts of their creative practices, and surveying current literature on narrative therapy, a case is made that, far from being generated purely from imagination, writers' creative choices are driven by an unconscious need to restory ourselves.

Le contenu de cette thèse explore la question de l’attribution de crédits à long terme dans l’apprentissage par renforcement du point de vue d’un biais inductif de parcimonie. Dans ce contexte, un agent parcimonieux cherche à comprendre son environnement en utilisant le moins de variables possible. Autrement dit, si l’agent est crédité ou blâmé pour un certain comportement, la parcimonie l’oblige à attribuer ce crédit (ou blâme) à seulement quelques variables latentes sélectionnées. Avant de proposer de nouvelles méthodes d’attribution parci- monieuse de crédits, nous présentons les travaux antérieurs relatifs à l’attribution de crédits à long terme en relation avec l’idée de sparsité. Ensuite, nous développons deux nouvelles idées pour l’attribution de crédits dans l’apprentissage par renforcement qui sont motivées par un raisonnement parcimonieux : une dans le cadre sans modèle et une pour l’apprentissage basé sur un modèle. Pour ce faire, nous nous appuyons sur divers concepts liés à la parcimonie issus de la causalité, de l’apprentissage supervisé et de la simulation, et nous les appliquons dans un cadre pour la prise de décision séquentielle. La première, appelée évaluation contrefactuelle de la politique, prend en compte les dévi- ations mineures de ce qui aurait pu être compte tenu de ce qui a été. En restreignant l’espace dans lequel l’agent peut raisonner sur les alternatives, l’évaluation contrefactuelle de la politique présente des propriétés de variance favorables à l’évaluation des politiques. L’évaluation contrefactuelle de la politique offre également une nouvelle perspective sur la rétrospection, généralisant les travaux antérieurs sur l’attribution de crédits a posteriori. La deuxième contribution de cette thèse est un algorithme augmenté d’attention latente pour l’apprentissage par renforcement basé sur un modèle : Latent Sparse Attentive Value Gra- dients (LSAVG). En intégrant pleinement l’attention dans la structure d’optimisation de la politique, nous montrons que LSAVG est capable de résoudre des tâches de mémoire active que son homologue sans modèle a été conçu pour traiter, sans recourir à des heuristiques ou à un biais de l’estimateur original. / The content of this thesis explores the question of long-term credit assignment in reinforce- ment learning from the perspective of a parsimony inductive bias. In this context, a parsi- monious agent looks to understand its environment through the least amount of variables possible. Alternatively, given some credit or blame for some behavior, parsimony forces the agent to assign this credit (or blame) to only a select few latent variables. Before propos- ing novel methods for parsimonious credit assignment, previous work relating to long-term credit assignment is introduced in relation to the idea of sparsity. Then, we develop two new ideas for credit assignment in reinforcement learning that are motivated by parsimo- nious reasoning: one in the model-free setting, and one for model-based learning. To do so, we build upon various parsimony-related concepts from causality, supervised learning, and simulation, and apply them to the Markov Decision Process framework. The first of which, called counterfactual policy evaluation, considers minor deviations of what could have been given what has been. By restricting the space in which the agent can reason about alternatives, counterfactual policy evaluation is shown to have favorable variance properties for policy evaluation. Counterfactual policy evaluation also offers a new perspective to hindsight, generalizing previous work in hindsight credit assignment. The second contribution of this thesis is a latent attention augmented algorithm for model-based reinforcement learning: Latent Sparse Attentive Value Gradients (LSAVG). By fully inte- grating attention into the structure for policy optimization, we show that LSAVG is able to solve active memory tasks that its model-free counterpart was designed to tackle, without resorting to heuristics or biasing the original estimator.

When judging interpersonal aggression, witnesses are usually expected to rationally consider, based on the evidence they have, what another reasonable person could (or should) have thought, known and done. However their analysis may be affected by judgment biases and personal motivations. These evaluative and retrospective biases, as well as the ascription of blame, are the main interests of this research. More specifically, we investigated the consequences of witnesses being prone to the hindsight bias, which is a common bias that gives individuals the feeling that they would have been able to predict past events, what in fact, is not the case. This process may have important effects on the victim, who “should have known” that an aggression would happen to him/her. In this dissertation, we examine the moderators of this bias and the role of the communication context in which it develops. We hypothesized that the communication context might affect the perspective that is taken on the event of interpersonal aggression and the perceived distance towards it. Also, we expected that the hindsight bias and victim blame would be decreased when reducing the psychological distance towards the event (i.e. perceived temporal distance and perceived proximity with the victim’s fate). In a same vein, we expected that the aggressor would be more derogated in this condition. The first four studies were designed to investigate the role of communication goals about the aggression. Asking participants to describe how (vs. why) the aggression happened was expected to diminish the perceived distance. The following study (study 5) examined whether reporting the event in the passive voice (vs. active voice) would have a similar effect. The four last studies investigated how the time of presenting the event (before vs. after its antecedents) would influence the perception of distance towards the events and the judgments. We expected that knowing the outcome initially might reduce the perceived distance with the events. Results of the first five studies confirmed the main hypotheses: the communication context that focused on the “how” of the event or that presented it in the passive voice reduced the perceived distance and diminished the predictability of the aggression and victim derogation. It also increases the derogation of the aggressor. In addition, the latter studies revealed that learning about the outcome right away leads to reduced derogation of the perpetrator and increased derogation of the victim, even when reducing the perceived distance with the event. Overall, this research suggests that the communication context in which the hindsight bias emerges, as well as the perceived distance with the negative event, are important factors when examining the retrospective reasoning and judgments of witnesses.<p><p><p><p><p>Lorsque les témoins jugent une agression interpersonnelle, il est généralement attendu d’eux qu’ils considèrent rationnellement ce qu’une personne raisonnable aurait pu penser, savoir et faire dans pareille situation, et ce en se fondant uniquement sur les preuves qui leur sont fournies. Il n’en reste pas moins que leur analyse sera toutefois tronquée par des biais de jugement et des motivations personnelles. C’est pourquoi la détermination du blâme et l’influence des déformations rétrospectives et évaluatives sont au cœur de cette recherche. Ainsi, nous investiguons plus particulièrement le biais de rétrospection, à savoir l’erreur commune qui laisse à l’individu penser qu’il est en mesure de prévoir n’importe quel événement, alors qu’en réalité, il n’en est rien. Une telle erreur peut cependant avoir de graves conséquences pour la victime dès lors que les témoins sont amenés à croire qu’elle aurait « dû » prévoir ce qui allait survenir. Dans cette thèse, nous envisageons également les modérateurs de ce biais, dont le rôle du contexte communicationnel. Nous avons, dès lors, fait l’hypothèse que le contexte communicationnel pourrait affecter l’angle sous lequel les témoins considèrent l’événement et la distance perçue par rapport à celui-ci. Ce faisant, nous pensions que le biais de rétrospection et le blâme de la victime seraient réduits lorsque le contexte diminuait la distance perçue vis-à-vis de l’événement (en l’occurrence, la distance temporelle et la proximité perçue avec le sort de la victime). De même, il était attendu que l’agresseur soit davantage blâmé dans pareille condition. Les quatre premières études s’intéressaient donc au rôle des buts poursuivis lors de la communication à propos de l’agression, afin d’envisager en quoi décrire comment (vs. pourquoi) l’agression s’était produite aidait à réduire la distance perçue. Une cinquième étude nous a ensuite permis de considérer si la voix passive (versus active) avait aussi un effet similaire. Quant aux quatre dernières études, elles avaient pour objectif d’investiguer dans quelle mesure l’ordre de présentation des informations (connaître la fin avant, vs. après les antécédents) pouvait avoir également une incidence sur la prise de distance par rapport à l’événement et aux jugements. Plus précisément, nous faisions l’hypothèse que connaître l’événement en premier lieu (avant ses antécédents) facilitait la réduction de la distance perçue. Les résultats obtenus dans les cinq premières recherches semblaient confirmer nos hypothèses :Un contexte communicationnel qui réduisait la distance psychologique perçue par rapport à l’événement pouvait non seulement diminuer le biais de rétrospection et le blâme de la victime, mais augmenter aussi le blâme de l’agresseur. Toutefois, les dernières recherches ont semblé démontrer, a contrario, que connaître l’agression en premier lieu pouvait réduire le blâme de l’agresseur et augmenter celui de la victime, alors même que la distance perçue avec les événements était réduite. In fine, ce travail suggère donc que le contexte communicationnel, dans lequel le biais émerge, et la prise de distance face à l’événement négatif sont autant de pistes qu’il faudrait creuser à l’avenir pour mieux comprendre le raisonnement et les jugements rétrospectifs des témoins. / Doctorat en Sciences Psychologiques et de l'éducation / info:eu-repo/semantics/nonPublished