Budování pomocí systémů AI

• Vyberte architekturu na základě požadavků na úkol a důkazy.
• Zhodnoťte kvalitu, latenci, náklady a bezpečnost společně.
• Monitorování návrhu a reakce na incidenty před spuštěním.

Doporučuji nejprve: AI základy, Zodpovědný uživatel AI

1. 1

   Systémy jazykových modelů

   Výsledek: Uvažujte o tokenech, kontextu, generování a kompromisech modelu.

   Praxe: Porovnejte dvě možnosti modelů pomocí kvality, latence, kontextu, soukromí a ceny.

   Mechanika jazykových modelůModely, inference a omezeníNáklady na model a provozní kompromisy
   ChatGPT a LLM →Vysvětlení modelů AI →Inference AI →
2. 2

   Uzemnění s vyzvednutím

   Výsledek: Vědět, kdy a jak může vyhledávání zlepšit přístup k důkazům.

   Praxe: Navrhněte sadu testů vyhledávání s požadavky na odpovědi a citace.

   Generování rozšířené o načítáníOvěření zdroje a tvrzení
   Kvalita vyhledávání →Vektorové databáze →Vložení →
3. 3

   Agenti a nástroje

   Výsledek: Svázejte vícestupňové systémy s oprávněními a kontrolními body.

   Praxe: Napište model oprávnění agenta a cestu k obnově po selhání.

   Agenti, nástroje a dlouhodobé úkolyHranice automatizace a ochranyBezpečnost AI a riziko zneužití
   Agenti AI →Automatizace pracovních postupů pomocí AI →
4. 4

   Hodnocení a provoz

   Výsledek: Měřte výkon systému před nasazením a po něm.

   Praxe: Vytvořte hodnotící sadu pokrývající kvalitu, odmítnutí, latenci, náklady a regrese.

   Hodnocení a gramotnost v benchmarkechMetriky úspěchu a monitorováníReakce na incidenty pomocí AIExperiment a návrh pilotních projektů
   Benchmarky AI →Bezpečnost AI →