- Q.A.R.L. stands for QA Response Liaison, a GenAI agent for large-scale testing of conversational models.
- Functions of Q.A.R.L.:
- Engages with any GenAI chatbot on GCP (Google Cloud Platform).
- Customizable by goals, depths, attitudes, success criteria.
- Assesses response quality on a 1-10 scale, noting reasons for score deductions.
- Records conversations, ratings, and metadata to Cloud Storage for analysis.
Sobre testes:
- Adicionamos casos de uso, do tipo:
- Uma pessoa querendo viajar (situação esperada)
- Uma pessoa não interessada em viajar (hacker)
- Uma pessoa querendo viajar mas pedindo para o chat agir como um pirata.