Casa Finanza personale Preparazione dei dati per Predictive Analytics - dummies

Preparazione dei dati per Predictive Analytics - dummies

Sommario:

Video: Preparazione dati per Time Manager - How to setting data for Time Manager 2025

Video: Preparazione dati per Time Manager - How to setting data for Time Manager 2025
Anonim

Una volta definiti gli obiettivi del modello, il passo successivo nell'analisi predittiva è identificare e preparare i dati che verranno utilizzati per creare il modello. Le seguenti informazioni riguardano le attività più importanti. La sequenza generale di passaggi è la seguente:

  1. Identifica le tue origini dati.

    I dati potrebbero essere in diversi formati o risiedere in varie posizioni.

  2. Identifica come accederai a quei dati.

    A volte, è necessario acquisire dati di terze parti o dati di proprietà di una divisione diversa nella propria organizzazione, ecc.

  3. Considerare quali variabili includere nell'analisi.

    Un approccio standard prevede di iniziare con una vasta gamma di variabili ed eliminare quelle che non offrono alcun valore predittivo per il modello.

  4. Determina se utilizzare le variabili derivate.

    In molti casi, una variabile derivata (come il rapporto prezzo / guadagno utilizzato per analizzare i prezzi delle azioni) avrebbe un impatto diretto maggiore sul modello rispetto alla variabile grezza.

  5. Esplora la qualità dei tuoi dati, cercando di capire sia il suo stato che i suoi limiti.

    La precisione delle previsioni del modello è direttamente correlata alle variabili selezionate e alla qualità dei dati. A questo punto, vorrai rispondere ad alcune domande specifiche:

    • I dati sono completi?
    • Ha qualche outlier?
    • I dati necessitano di pulizia?
    • Hai bisogno di inserire valori mancanti, tenerli così come sono o eliminarli del tutto?

La comprensione dei dati e delle sue proprietà può aiutarti a scegliere l'algoritmo che sarà più utile nella costruzione del tuo modello. Ad esempio:

  • Gli algoritmi di regressione possono essere utilizzati per analizzare i dati delle serie temporali.
  • Gli algoritmi di classificazione possono essere utilizzati per analizzare dati discreti.
  • Gli algoritmi di associazione possono essere utilizzati per dati con attributi correlati.

Gli algoritmi individuali e le tecniche predittive hanno diverse debolezze e punti di forza. Più importante, l'accuratezza del modello si basa sull'avere sia una grande quantità sia una qualità dei dati. I tuoi dati dovrebbero avere un numero sufficiente di record per fornire risultati statisticamente significativi.

La raccolta di dati rilevanti (preferibilmente molti record per un lungo periodo di tempo), la pre-elaborazione e l'estrazione delle funzionalità con la maggior parte dei valori predittivi sarà dove trascorrerai la maggior parte del tuo tempo. Ma devi ancora scegliere saggiamente l'algoritmo, un algoritmo che dovrebbe essere adatto al problema aziendale.

La preparazione dei dati è specifica del progetto su cui stai lavorando e dell'algoritmo che scegli di utilizzare.A seconda dei requisiti del progetto, preparerai i tuoi dati di conseguenza e li trasmetteranno all'algoritmo mentre costruisci il tuo modello per soddisfare le esigenze aziendali.

Il set di dati utilizzato per addestrare e testare il modello deve contenere informazioni aziendali pertinenti per rispondere al problema che si sta tentando di risolvere. Se il tuo obiettivo è (ad esempio) per determinare quale cliente è probabile che abbandoni, allora il set di dati che scegli deve contenere informazioni sui clienti che hanno agitato in passato oltre ai clienti che non lo hanno fatto.

Alcuni modelli creati per estrarre dati e dare un senso alle sue relazioni sottostanti - ad esempio, quelli costruiti con algoritmi di clustering - non hanno bisogno di avere un particolare risultato finale in mente.

Underfitting

Underfitting è quando il tuo modello non è in grado di rilevare alcuna relazione nei tuoi dati. Questo di solito indica che le variabili essenziali - quelle con potere predittivo - non sono state incluse nella tua analisi.

Se le variabili utilizzate nel modello non hanno un elevato potere predittivo, provare ad aggiungere nuove variabili specifiche del dominio ed eseguire nuovamente il modello. L'obiettivo finale è migliorare le prestazioni del modello sui dati di allenamento.

Un altro problema da tenere sotto controllo è stagionalità (quando hai un modello stagionale, se non riesci ad analizzare più stagioni potresti metterti nei guai). Ad esempio, un'analisi stock che include solo i dati di un toro il mercato (dove i prezzi complessivi delle azioni stanno salendo) non tiene conto di crisi o bolle che possono apportare importanti correzioni al rendimento complessivo degli stock. La mancata inclusione di dati che abbracciano i mercati di toro e (quando i prezzi complessivi delle azioni stanno calando) impedisce al modello di produrre la migliore selezione di portafoglio possibile.

Overfitting

Overfitting si verifica quando il modello include dati privi di potenza predittiva, ma è specifico solo per il set di dati che si sta analizzando. Rumore - variazioni casuali nel set di dati - possono trovare la sua strada nel modello, in modo tale che l'esecuzione del modello su un set di dati diverso produce un notevole calo nelle prestazioni predittive e accuratezza del modello.

Preparazione dei dati per Predictive Analytics - dummies

Scelta dell'editore

Come leggere dal file in PHP per la programmazione HTML5 e CSS3 - manichini

Come leggere dal file in PHP per la programmazione HTML5 e CSS3 - manichini

Se puoi scrivere dati in un file in PHP, sarebbe logico che tu possa leggere da quel file anche per la programmazione HTML5 e CSS3. Il readContact. programma php recupera i dati salvati nel programma precedente e li visualizza sullo schermo. Non è difficile scrivere un programma per leggere ...

Come usare una classe PHP in uno script - dummy

Come usare una classe PHP in uno script - dummy

Il codice classe PHP deve essere inserito lo script che usa la classe. Più comunemente, la classe viene archiviata in un file di inclusione separato ed è inclusa in qualsiasi script che utilizza la classe. Per usare un oggetto, devi prima creare l'oggetto dalla classe. Quindi quell'oggetto può eseguire qualsiasi metodo che ...

Scelta dell'editore

Come usare lo strumento Timbro clone di Photoshop - manichini

Come usare lo strumento Timbro clone di Photoshop - manichini

Puoi usare lo strumento Timbro clone in Photoshop per rimuovere gli angoli e altri difetti copiando una porzione dei pixel circostanti, che dovrebbero avere un colore e una consistenza simili, sopra la parte malata dell'immagine. Per utilizzare lo strumento Timbro clone, attenersi alla seguente procedura: Selezionare lo strumento Timbro clone dallo strumento ...

Come disinstallare e reinstallare Photoshop Lightroom - dummies

Come disinstallare e reinstallare Photoshop Lightroom - dummies

Se si nota un problema con Lightroom la prima volta che si avvia esso, qualcosa potrebbe essere andato storto durante il processo di installazione. Disinstallare e quindi reinstallare potrebbe essere tutto ciò che è necessario per correggere il problema. Il processo è diverso per ogni sistema operativo, quindi ecco i passaggi separati per ciascuno. Su Windows: Chiudi tutto ...

Fotografia For Dummies Cheat Sheet - dummies

Fotografia For Dummies Cheat Sheet - dummies

La fotografia è un hobby divertente e gratificante che può renderti molto popolare tra la gente nelle tue foto - o molto impopolare. Per ottenere il massimo da una fotocamera "inquadra e scatta", digitale o meno, la prima abilità da padroneggiare è bloccare l'attenzione. Puoi perfezionare le tue abilità fotografiche in modo che le tue foto siano ...

Scelta dell'editore

Agire per aumentare le emozioni edificanti - manichini

Agire per aumentare le emozioni edificanti - manichini

Al fine di elevare le tue emozioni, il primo passo è diventare consapevoli di quale emozioni che hai Diventa consapevole di ciò che ti innesca: cosa ti mette in agitazione e ti fa arrabbiare e ciò che ti rende molto eccitato. Un trigger sta guardando alcuni programmi televisivi e consente alle emozioni di questi programmi di permeare ...

Come le aziende ti convincono ad acquistare i loro prodotti - manichini

Come le aziende ti convincono ad acquistare i loro prodotti - manichini

Quasi tutti i media commerciali destinati alle donne ottengono la loro pubblicità entrate dalle industrie del cibo, della bellezza, della dieta e della moda. Solo l'industria della dieta stessa è un'impresa commerciale da 33 miliardi di dollari l'anno. E, naturalmente, queste industrie hanno bisogno di clienti in modo continuativo per continuare a avere successo. È nel loro interesse per ...

Come si forma l'immagine del corpo nella tua gioventù - dummies

Come si forma l'immagine del corpo nella tua gioventù - dummies

In generale, ciò che hai vissuto con la tua famiglia quando stavano crescendo ha avuto un effetto diretto sui pensieri e le sensazioni che hai avuto sul tuo corpo. Ripensa ai tuoi anni più giovani. Quanto attentamente le seguenti affermazioni descrivono la tua famiglia? Nessuno ha esercitato. L'auto è stata utilizzata anche per viaggi brevi. Cibo pesante e da ingrasso ...