Instructiune Validare Flashcards
Care este scopul validarii?
Scopul este de a evalua puterea de predictie a estimatorlor de risc si a modelelor de rating folosite de banca
Care sunt tipurile de validari?
- Validare initiala (dezvoltata cand un model este implementat)
- Validare recurenta (aplicata pe intervale regulate de timp)
Care sunt intrebarile la care validarea trebuie sa raspunda?
- Robustetea modelului
- Adecvarea datelor
- Performanta modelului
- Implementarea pasilor de dezvoltare
Care sunt testele utilizate in validarea initiala?
- Documentatie clara si exacta
- Arhitectura modelului
- Slectia datelor
- Pregatirea datelor (dubluri, missing, valori extreme, descriptive, transformari)
- Selectia variabilelor
- Dezvoltarea modelului
- Integrarea modulelor
- Scala de rating
- Benchmarking
- Implementarea in cod corespunde cu documentatia
- Stabilitatea portfoliului
- Backtesting
- Performanta modelului
- Modelul este adecvat scopului
Ce presupune testul documentatiei clare si exacte?
Se verifica daca documentatia e indeajuns de clara incat o persoana calificata poate replica rezultatele obtinute
Ce presupune testul arhitecturii modelului?
Se verifica daca modelul este robust din punct de vedere matematic
Ce presupune testul legat de selectia datelor?
Ne asiguram ca datele colectate sunt suficiente pentru modelare
Plus argumentari
Ce presupune pasul selectiei variabilelor?
Verificam daca variabilele sunt semnificative
Pe baza Gini sau IV, matrice de corelatie
Ce presupune pasul de integrare a modulelor?
Se evalueaza modul in care modulele sunt integrate, se prezinta functia de integrare
Ce presupune pasul de verificare a scalei de rating?
Verificam daca scala este corect calibrata pe date
Ce presupune pasul de verificare a performantei modelului?
Se verifica daca modelul distinge bine clientii buni de cei rai
Pe baza curbei ROC sau alte masuri
Ce presupune pasul implemenrarii care corespunde cu documentatia?
Se verifica daca scorul final prezentat in documentatie este corect implementat
Ce presupune pasul utilizarii modelului in acordarea de credite?
Se evalueaza in ce masura modelul este utilizat in procesul decizional
Ce presupune pasul analizarii stabilitatii portfoliului?
Se analizeaza structura portfoliului curent in comparatie cu structura lui din perioade anterioare
Ce presupune testul monotoniei ratelor de risc? (DD)
Se verifica daca monotonia se mentine, impreuna cu IV