Spelling suggestions: "subject:"multitouch attribution"" "subject:"intouch attribution""
1 |
Investigating the Attribution Quality of LSTM with Attention and SHAP : Going Beyond Predictive Performance / En undersökning av attributionskvaliteten av LSTM med attention och SHAP : Bortom prediktiv prestandaKindbom, Hannes January 2021 (has links)
Estimating each marketing channel’s impact on conversion can help advertisers develop strategies and spend their marketing budgets optimally. This problem is often referred to as attribution modelling, and it is gaining increasing attention in both the industry and academia as access to online tracking data improves. Focusing on achieving higher predictive performance, the Long Short- Term Memory (LSTM) architecture is currently trending as a data-driven solution to attribution modelling. However, such deep neural networks have been criticised for being difficult to interpret. Interpretability is critical, since channel attributions are generally obtained by studying how a model makes a binary conversion prediction given a sequence of clicks or views of ads in different channels. Therefore, this degree project studies and compares the quality of LSTM attributions, calculated with SHapleyAdditive exPlanations (SHAP), attention and fractional scores to three baseline models. The fractional score is the mean difference in a model’s predicted conversion probability with and without a channel. Furthermore, a synthetic data generator based on a Poisson process is developed and validated against real data to measure attribution quality as the Mean Absolute Error (MAE) between calculated attributions and the true causal relationships between channel clicks and conversions. The experimental results demonstrate that the quality of attributions is not unambiguously reflected by the predictive performance of LSTMs. In general, it is not possible to assume a high attribution quality solely based on high predictive performance. For example, all models achieve ~82% accuracy on real data, whereas LSTM Fractional and SHAP produce the lowest attribution quality of 0:0566 and 0:0311 MAE respectively. This can be compared to an improved MAE of 0:0058, which is obtained with a Last-Touch Attribution (LTA) model. The attribution quality also varies significantly depending on which attribution calculation method is used for the LSTM. This suggests that the ongoing quest for improved accuracy may be questioned and that it is not always justified to use an LSTM when aiming for high quality attributions. / Genom att estimera påverkan varje marknadsföringskanal har på konverteringar, kan annonsörer utveckla strategier och spendera sina marknadsföringsbudgetar optimalt. Det här kallas ofta attributionsmodellering och det får alltmer uppmärksamhet i både näringslivet och akademin när tillgången till spårningsinformation ökar online. Med fokus på att uppnå högre prediktiv prestanda är Long Short-Term Memory (LSTM) för närvarande en populär datadriven lösning inom attributionsmodellering. Sådana djupa neurala nätverk har dock kritiserats för att vara svårtolkade. Tolkningsbarhet är viktigt, då kanalattributioner generellt fås genom att studera hur en modell gör en binär konverteringsprediktering givet en sekvens av klick eller visningar av annonser i olika kanaler. Det här examensarbetet studerar och jämför därför kvaliteten av en LSTMs attributioner, beräknade med SHapley Additive exPlanations (SHAP), attention och fractional scores mot tre grundmodeller. Fractional scores beräknas som medelvärdesdifferensen av en modells predikterade konverteringssannolikhet med och utan en viss kanal. Därutöver utvecklas en syntetisk datagenerator baserad på en Poissonprocess, vilken valideras mot verklig data. Generatorn används för att kunna mäta attributionskvalitet som Mean Absolute Error (MAE) mellan beräknade attributioner och de verkliga kausala sambanden mellan kanalklick och konverteringar. De experimentella resultaten visar att attributionskvaliteten inte entydigt avspeglas av en LSTMs prediktiva prestanda. Det är generellt inte möjligt att anta en hög attributionskvalitet enbart baserat på en hög prediktiv prestanda. Alla modeller uppnår exempelvis ~82% prediktiv träffsäkerhet på verklig data, medan LSTM Fractional och SHAP ger den lägsta attributionskvaliteten på 0:0566 respektive 0:0311 MAE. Det här kan jämföras mot en förbättrad MAE på 0:0058, som erhålls med en Last-touch-modell. Kvaliteten på attributioner varierar också signifikant beroende på vilket metod för attributionsberäkning som används för LSTM. Det här antyder att den pågående strävan efter högre prediktiv träffsäkerhet kan ifrågasättas och att det inte alltid är berättigat att använda en LSTM när attributioner av hög kvalitet eftersträvas.
|
2 |
Insights on Creating a Growth Machine Using Attribution Modelling / Insikter kring skapandet av en tillväxtmaskin med attributionsmodelleringKindbom, Hannes, Reineck, Viktor January 2021 (has links)
Given access to detailed tracking data, the problem of attribution modelling has recently gained attention in both academia and the industry. Being able to determine the influence of each marketing channel in driving conversions can help advertisers to allocate their marketing budgets accordingly and ultimately increase their customer base and achieve a higher Return On Investment (ROI). However, Last-Touch Attribution (LTA), the current industry standard to approach the problem, has been criticized for oversimplification. In this degree project, two data-driven attribution models are therefore compared to the LTA model on real data from an insurance company, with the objective to optimize for customer base growth and ROI. Raw attributions for each channel are obtained after training the models to predict conversion or non-conversion. By using a linear function to obtain a Customer Lifetime Value (CLV) estimate, the attributions are then adjusted to the ROI of each channel and finally validated through an attribution based budget allocation and historical marketing data replay. The experimental results demonstrate that all models reach approximately 82% accuracy on balanced data, just below the calculated theoretical maximum. While current research consistently argues for more complex data-driven Multi-Touch Attribution (MTA) models, this project provides a nuance to this field of research in showing that the LTA model may, in fact, be suitable in some cases. A new approach to develop specialized models based on correlations between conversion and contextual variables, then shows that attribution models for mobile users specifically yield higher accuracy. The sum of such unnormalized attributions function as indicators for the conversion strength of contextual variables and can further assist decision making. / Givet tillgång till detaljerad spårningsinformation har attributionsmodellering nyligen fått uppmärksamhet i både akademin och näringslivet. Att kunna förstå påverkan varje marknadsföringskanal har på att driva konverteringar, kan underlätta för annonsörer att fördela marknadsföringsbudgetar och i slutändan öka antalet kunder samt uppnå en högre avkastning på investeringen. Last-Touch-Attribution (LTA), den nuvarande branschstandarden för att angripa problemet, har emellertid kritiserats för att vara överförenklande. I det här examensarbetet jämförs därför två datadrivna attributions-modeller med LTA på verklig data från ett försäkringsbolag med målet att optimera för kundbastillväxt och avkastning. Råa attributioner för varje kanal erhålls efter att modellerna tränats på att prediktera konvertering eller icke-konvertering. Genom att estimera kundens livstidsvärde med en linjär funktion, justeras attributionerna sedan med avkastningen på investering för varje kanal och valideras slutligen genom en attributionsbaserad budgetallokering och uppspelning av historisk marknadsföringsdata. De experimentella resultaten visar att alla modeller når ungefär 82% träffsäkerhet på balanserad data, strax under det beräknade teoretiska maximivärdet. Medan aktuell forskning konsekvent argumenterar för mer komplexa datadrivna multi-touch-modeller, ger det här projektet en nyans till forskningsfältet genom att visa att LTA i vissa fall kan vara lämplig. Ett nytt tillvägagångssätt för att utveckla specialiserade modeller baserade på korrelationer mellan konvertering och kontextuella variabler, visar sedan att attributionsmodeller för enbart mobilanvändare ger högre träffsäkerhet. Summan av sådana onormaliserade attributioner fungerar som indikatorer på konverteringsstyrkan för kontextuella variabler och kan ytterligare underlätta beslutsfattandet.
|
3 |
Optimizing Online Marketing Efficiency By Analyzing the Mutual Influence of Online Marketing Channels with Respect to Different DevicesNass, Ole 11 June 2019 (has links)
[ES] ¿Cómo es la atribución en un entorno de omnicanal? Se puede determinar una distinción
importante en contraste con la atribución en un entorno multicanal. Además de proporcionar
el proceso de análisis de marketing, una especificación del proceso estándar intersectorial
para la minería de datos (CRISP¿DM), se utiliza un enfoque de método mixto secuencial para
analizar la cuestión principal de la investigación.
En el primer paso de esta investigación se analizan las características y los requisitos de
atribución eficiente en un entorno omnicanal. A partir de entrevistas semiestructuradas con
expertos y de un proceso de investigación bibliográfica holística estructurada, se identifica
claramente la falta de un enfoque de atribución omnicanal. Los enfoques de atribución
existentes se identifican mediante la realización de un proceso estructurado de revisión de la
literatura. Estos enfoques identificados se evalúan aplicando los resultados de las entrevistas
semiestructuradas con expertos, es decir, los requisitos y características de una atribución
omnicanal eficiente. Ninguno de los enfoques de atribución identificados cumple con la
mayoría de los requisitos de omnicanal analizados.
Al tener la brecha de investigación ¿ la falta de un enfoque de atribución de omnicanales ¿
claramente identificada, se desarrolla un enfoque de atribución de omnicanales en la segunda
parte de esta investigación presentada. Utilizando la metodología MAP, la principal laguna de
investigación se llena proporcionando el Holistic Customer Journey (HCJ): una base de datos
lista para el omni¿canal y un enfoque de atribución de omni¿canal correspondiente. Entre
otras cosas, el enfoque de atribución desarrollado consiste en una clasificación de aprendizaje
automático. Esta investigación presentada es la primera en utilizar información de casi
240.000.000 de conjuntos de datos de interacción, que contienen información entre
dispositivos y entre plataformas. Todas las fuentes de datos subyacentes son proporcionadas
por una de las plataformas inmobiliarias más grandes de Alemania. / [CAT] Com és l'atribució en un entorn de omnicanal? Es pot determinar una distinció important en
contrast amb l'atribució en un entorn multicanal. A més de proporcionar el procés d'anàlisi de
màrqueting, una especificació del procés estàndard intersectorial per a la mineria de dades
(CRISP¿DM), s'utilitza un enfocament de mètode mixt seqüencial per analitzar la qüestió
principal de la investigació.
En el primer pas d'aquesta investigació s'analitzen les característiques i els requisits d'atribució
eficient en un entorn omnicanal. A partir d'entrevistes semiestructurades amb experts i d'un
procés de recerca bibliogràfica holística estructurada, s'identifica clarament la falta d'un
enfocament d'atribució omnicanal. Els enfocaments d'atribució existents s'identifiquen
mitjançant la realització d'un procés estructurat de revisió de la literatura. Aquests
enfocaments identificats s'avaluen aplicant els resultats de les entrevistes semiestructurades
amb experts, és a dir, els requisits i característiques d'una atribució omnicanal eficient. Cap
dels enfocaments d'atribució identificats compleix amb la majoria dels requisits de omnicanal
analitzats.
En tenir la bretxa de recerca ¿ la manca d'un enfocament d'atribució de omnicanales ¿
clarament identificada, es desenvolupa un enfocament d'atribució de omnicanales a la segona
part d'aquesta investigació presentada. Utilitzant la metodologia MAP, la principal llacuna de
recerca s'omple proporcionant el Holistic Customer Journey (HCJ): una base de dades a punt
per al omni¿canal i un enfocament d'atribució de omni¿canal corresponent. Entre altres coses,
l'enfocament d'atribució desenvolupat consisteix en una classificació d'aprenentatge
automàtic. Aquesta investigació presentada és la primera a utilitzar informació de gairebé
240.000.000 de conjunts de dades d'interacció, que contenen informació entre dispositius i
entre plataformes. Totes les fonts de dades subjacents són proporcionades per una de les
plataformes immobiliàries més grans d'Alemanya. / [EN] What does attribution in an omni¿channel environment look like? A major distinction can be
determined in contrast to attribution in a multi¿channel environment. Besides providing the
Marketing Analytics Process, a specification of the Cross¿industry standard process for data
mining (CRISP¿DM), a sequential mixed method approach is utilized to analyze the main
research question.
Within the first step of this presented research characteristics, and requirements of efficient
attribution in an omni¿channel environment are analyzed. Based on semi¿structured expert
interviews and a holistic structured literature research process, the lack of an omni¿channel
attribution approach is clearly identified. Existing attribution approaches are identified by
conducting the structured literature review process. Those identified approaches are
evaluated by applying the results of the semi¿structured expert interviews - the requirements
and characteristics of efficient omni¿channel attribution. None of the identified attribution
approaches fulfill a majority of the analyzed omni¿channel requirements.
By having the research gap - the lack of an omni¿channel attribution approach - clearly
identifed, an omni¿channel attribution approach is developed in the second part of this
presented research. Utilizing the MAP methodology, the main research gap is filled by
providing the Holistic Customer Journey (HCJ): an omni¿channel ready data foundation and a
corresponding omni¿channel attribution approach. Among other things the developed
attribution approach consists of a machine learning classification. This presented research is
the first to utilize information from almost 240.000.000 interaction data sets, containing crossdevice
and cross¿platform information. All underlying data sources are provided by one of
Germany's largest real¿estate platforms. / Nass, O. (2019). Optimizing Online Marketing Efficiency By Analyzing the Mutual Influence of Online Marketing Channels with Respect to Different Devices [Tesis doctoral no publicada]. Universitat Politècnica de València. https://doi.org/10.4995/Thesis/10251/122296 / TESIS
|
Page generated in 0.0893 seconds