Skip to main content

Prompt versioning i regresijski testovi

Natrag na OpenClaw vodič

Oriphiel OpenClaw vodič

Prompt versioning i regresijski testovi

Kako upravljati promptovima kao kodom: verzije, changelog, eval skupovi, rollout, rollback i usporedba modela.

Što ova OpenClaw tema rješava

OpenClaw treba pomagati u stvarnom radu s upitima, kontaktima i poslovnim prilikama. Svaka tema ima smisla samo ako smanjuje ručno prepisivanje, ubrzava odgovor, čisti podatke ili daje bolju odluku o sljedećem koraku.

Prompt je dio aplikacije. Kada se promijeni system prompt, alat opis, output schema ili model, agent može promijeniti ponašanje iako se backend kod nije promijenio. OpenClaw treba verzionirati promptove, vezati run uz prompt version i pokrenuti regresijske testove prije produkcijskog rollouta.

Ključne odluke

  • Promptovi trebaju biti u repozitoriju ili kontroliranom storageu s verzijama.
  • Svaki agent run treba znati prompt version i model version.
  • Promjena prompta treba proći isti eval skup kao promjena modela.
  • Rollback mora biti brz i dokumentiran.

Kako primijeniti u praksi

Praktična provedba počinje od minimalnog procesa koji tim stvarno koristi. Najprije se uvode statusi, izvori, vlasnici i osnovne aktivnosti, a zatim automatizacije koje pouzdano prenose podatke između weba, kampanja, inboxa i CRM-a.

Koraci provedbe

  • Izvući promptove iz ad hoc teksta u verzionirane definicije.
  • Dodati changelog za cilj promjene i očekivani efekt.
  • Pokrenuti regression eval prije aktivacije.
  • Uvesti canary rollout za novi prompt na manjem opsegu.

Najčešće pogreške

Većina CRM problema ne nastaje zbog manjka ekrana, nego zbog nejasnog procesa. Ako lead nema izvor, status, vlasnika ili sljedeću aktivnost, sustav brzo postane samo još jedno mjesto za ručno traženje informacija.

Na što treba paziti

  • Prompt se promijeni iz UI-ja bez traga.
  • Tool opis se izmijeni i slomi izbor alata.
  • Novi prompt riješi jedan slučaj, ali pokvari opt-out detekciju.
  • Nema mogućnosti vratiti staru verziju.

Mjerenje i kontrola

OpenClaw treba pomagati u odlučivanju: koji izvori dovode korisne upite, gdje prodaja kasni, koji leadovi su kvalificirani i koje kampanje ili procesi trebaju promjenu. Zato svaka tema mora imati mali skup metrika koje netko redovito gleda.

Metrike koje imaju smisla

  • Prompt verzije u produkciji.
  • Regression pass rate.
  • Canary incidenti.
  • Rollback vrijeme.
  • Kvaliteta po prompt verziji.

OpenClaw pristup

OpenClaw pristup povezuje web formu, kampanje, CRM statuse, aktivnosti, outbound queue, suppression listu i dashboard u jedan operativni tok. Cilj je da se korisni upiti brže obrade, da se ne izgube follow-upovi i da marketing vidi stvarnu kvalitetu leadova.

Što se provjerava prije širenja procesa

  • Postoji li jasan vlasnik za novi lead i za sljedeću aktivnost.
  • Ima li svaki važan lead status, izvor i osnovne kontakt podatke.
  • Jesu li web forme, importi i kampanje testirani prije većeg opsega.
  • Postoji li suppression i opt-out kontrola za outbound komunikaciju.
  • Može li se izvještaj povezati s kvalitetom leadova, ponudama i zaključenim poslovima.

Česta pitanja

Je li tema "Prompt versioning i regresijski testovi" važna prije automatizacije?

Da, ako utječe na podatke, status, izvor, odgovornost ili sljedeći korak. Automatizacija ima smisla tek kada je ručni proces dovoljno jasan da ga sustav može pouzdano ponoviti.

Može li se OpenClaw uvesti postupno?

Da. Najbolje je krenuti s osnovnim CRM procesom: kontakti, leadovi, statusi, izvori i aktivnosti. Nakon toga se dodaju forme, importi, dashboardi, outbound i naprednije provjere.

Što je minimalno potrebno da CRM bude koristan?

Svaki lead treba imati kontakt podatke, izvor, status, odgovornu osobu i sljedeću aktivnost ili razlog zatvaranja. Bez toga CRM ne pomaže prodaji ni marketingu.