Quiz połączony z przewodnikiem · Ciężko Poziom
Zarządzanie ryzykiem modeli (SR 11-7) i quiz AI
Testuje trzy elementy walidacji zawarte w SR 11-7, efektywne wyzwanie, oczekiwania dotyczące modelu dostawcy oraz sposób, w jaki banki definiują granice modelu LLM.
Pytanie 1 z 8
Który dokument OCC został wydany wraz z SR 11-7 Rezerwy Federalnej w 2011 r.?
Podgląd każdego pytania8 pytania
Odpowiedzi i wyjaśnienia pojawiają się w miarę rozwiązywania quizu.
- Który dokument OCC został wydany wraz z SR 11-7 Rezerwy Federalnej w 2011 r.?
- OCC Bulletin 2013-29
- The Comptroller's Handbook on Liquidity
- OCC Bulletin 2011-12
- OCC Interpretive Letter 1170
- Jakie są trzy podstawowe elementy walidacji zgodnie z SR 11-7?
- Evaluating conceptual soundness, ongoing monitoring, and outcomes analysis
- Data collection, model training, and deployment
- Board approval, vendor certification, and annual audit
- Stress testing, capital planning, and liquidity review
- Czego wymaga SR 11-7, aby przegląd można było uznać za „skuteczne wyzwanie”?
- That the model developer approves their own work
- That a vendor certifies the model
- That the model passes a public benchmark
- That reviewers are objective, informed, competent and have enough influence to force changes
- Jak bank powinien postępować z modelem dostawcy, którego dane zastrzeżone są ukrywane?
- Exempt it from validation because the vendor is responsible
- Rely more on sensitivity analysis, benchmarking and outcomes testing
- Use it only for internal reporting
- Replace it with a model built in-house immediately
- Według przewodnika, który z nich stanowi część granicy modelu aplikacji LLM do zarządzania zmianami?
- The bank's office locations
- The customer's device type
- The system prompt and retrieval corpus
- The validator's job title
- Why does the guide recommend running repeated samples when testing an LLM?
- Its outputs can vary between runs, so the spread needs to be measured
- Regulators require exactly ten runs
- Repeated runs make the model more accurate
- It reduces the vendor's licensing fees
- Why does the guide say SR 11-7 applies to AI even though it was written in 2011?
- Congress amended it in 2023
- Its definition of a model is technology-neutral
- It names neural networks explicitly
- AI vendors requested it
- When did the FDIC adopt the SR 11-7 model risk guidance?
- 2008
- 2011
- 2014
- 2017