Instructiune Validare Flashcards

1
Q

Care este scopul validarii?

A

Scopul este de a evalua puterea de predictie a estimatorlor de risc si a modelelor de rating folosite de banca

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Care sunt tipurile de validari?

A
  • Validare initiala (dezvoltata cand un model este implementat)
  • Validare recurenta (aplicata pe intervale regulate de timp)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Care sunt intrebarile la care validarea trebuie sa raspunda?

A
  • Robustetea modelului
  • Adecvarea datelor
  • Performanta modelului
  • Implementarea pasilor de dezvoltare
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Care sunt testele utilizate in validarea initiala?

A
  1. Documentatie clara si exacta
  2. Arhitectura modelului
  3. Slectia datelor
  4. Pregatirea datelor (dubluri, missing, valori extreme, descriptive, transformari)
  5. Selectia variabilelor
  6. Dezvoltarea modelului
  7. Integrarea modulelor
  8. Scala de rating
  9. Benchmarking
  10. Implementarea in cod corespunde cu documentatia
  11. Stabilitatea portfoliului
  12. Backtesting
  13. Performanta modelului
  14. Modelul este adecvat scopului
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Ce presupune testul documentatiei clare si exacte?

A

Se verifica daca documentatia e indeajuns de clara incat o persoana calificata poate replica rezultatele obtinute

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Ce presupune testul arhitecturii modelului?

A

Se verifica daca modelul este robust din punct de vedere matematic

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Ce presupune testul legat de selectia datelor?

A

Ne asiguram ca datele colectate sunt suficiente pentru modelare

Plus argumentari

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Ce presupune pasul selectiei variabilelor?

A

Verificam daca variabilele sunt semnificative

Pe baza Gini sau IV, matrice de corelatie

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Ce presupune pasul de integrare a modulelor?

A

Se evalueaza modul in care modulele sunt integrate, se prezinta functia de integrare

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Ce presupune pasul de verificare a scalei de rating?

A

Verificam daca scala este corect calibrata pe date

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Ce presupune pasul de verificare a performantei modelului?

A

Se verifica daca modelul distinge bine clientii buni de cei rai

Pe baza curbei ROC sau alte masuri

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Ce presupune pasul implemenrarii care corespunde cu documentatia?

A

Se verifica daca scorul final prezentat in documentatie este corect implementat

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Ce presupune pasul utilizarii modelului in acordarea de credite?

A

Se evalueaza in ce masura modelul este utilizat in procesul decizional

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Ce presupune pasul analizarii stabilitatii portfoliului?

A

Se analizeaza structura portfoliului curent in comparatie cu structura lui din perioade anterioare

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Ce presupune testul monotoniei ratelor de risc? (DD)

A

Se verifica daca monotonia se mentine, impreuna cu IV

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Ce presupune testul stabilitatii claselor de rating?

A

Se verifica daca clasa de rating nu s-a modificat

17
Q

Ce presupune testul evaluarii performantei modelului?

A

Se evalueaza puterea de discriminare intre clientii buni si cei rai

Pe baza AR, KS, AUC etc