SCREENAGENT · Simulação navegável · Regulação de sinistros auto

O agente integrador operando o caso do cliente.mockup interativonenhum sistema real envolvido

Cenário: chega o boletim de ocorrência do sinistro AUT-30418, o agente extrai os dados, entra no sistema de seguros (CoreSeg) para confirmar que a ocorrência está coberta na apólice e confere a foto da CNH contra BO e apólice — com trilha de auditoria a cada passo.

30 milsinistros / mês
× 4conferências por sinistro
~159FTEs no cara-crachá manual
30 diasprazo regulatório
0linhas de RPA com coordenada ou seletor
velocidade
CoreSeg · layout v1 (original)
A mesa que o agente enxerga · documentos de entrada
NOVO

BOLETIM DE OCORRÊNCIA POLÍCIA CIVIL · 3º DP

2026-114-88301
NaturezaACID. TRÂNSITO · COLISÃO
Data/fato14/05/2026 · 22:10
LocalAV. BRASIL, 1200 · SÃO PAULO
VeículoRGT-7H42 · HONDA CIVIC
CondutorM. ANDRADE
DOCUMENTO ESCRITO · VIA SEGURADO
NOVO
Carteira Nacional de Habilitaçãocnh_foto.jpg
Nome
MARIANA ANDRADE
Nº registro
041 882 ***
Categoria
B
Validade
12/08/2029
Sistema alvo · operado pela tela, sem API
CoreSeg 6.2 — [Consulta de Apólice]
CONSULTA DE APÓLICE POR PLACA
ApóliceSeguradoPlacaVigênciaSituaçãoCoberturas
4471-0039281 MARIANA ANDRADE RGT-7H42 01/03/2026 a 01/03/2027 ATIVA COLISÃO · ROUBO/FURTO · RCF
✔ Sinistro AUT-30418 · decisão registrada: COBERTURA CONFIRMADA · fila de despacho
◈ CoreSeg Portalv7.0 · apólices
Situação
VIGENTE
Veículo
RGT-7H42 · Honda Civic
Segurado(a)
Mariana Andrade
Período de cobertura
03/2026 – 03/2027
Coberturas contratadas
ColisãoRoubo e furtoDanos a terceirosAssistência 24h
Apólice
4471-0039281
✔ Sinistro AUT-30418 · decisão registrada: COBERTURA CONFIRMADA · fila de despacho
ScreenAgent · console de execução
  • 1Extrair dados do boletim de ocorrência
  • 2Consultar apólice no CoreSeg (pela tela)
  • 3Validar cobertura: BO × apólice
  • 4Conferir CNH: foto × BO × apólice
  • 5Registrar decisão e trilha de auditoria
O meta-modelo que guia tudo · sinistros-auto.sdl.yaml
# o mesmo arquivo nas duas execuções — zero coordenadas, zero seletores app: "CoreSeg · Sistema de Sinistros" screens: - id: consulta_apolice intent: "Tela para consultar apólice pela placa do veículo" fields: - { id: placa, intent: "Campo para digitar a placa do veículo" } - { id: status, intent: "Situação da apólice: ATIVA ou CANCELADA" } - { id: vigencia, intent: "Período de vigência da apólice" } - { id: coberturas,intent: "Coberturas contratadas na apólice" } - { id: segurado, intent: "Nome do segurado principal" } actions: - id: consultar_apolice steps: - fill: { field: placa, value: "${bo.placa}" } - click: { intent: "Botão para pesquisar a apólice" } - wait: { until: "os dados da apólice estão visíveis" } - read: { field: status, into: apolice.status } - id: validar_sinistro steps: - check: bo.placa == apolice.placa - check: bo.data ∈ apolice.vigencia - check: bo.tipo ∈ apolice.coberturas - check: cnh.titular == bo.condutor - check: cnh.titular == apolice.segurado - check: cnh.valida == true
Log do agente · perceber → ancorar → decidir → atuar → verificar
SYSconsole pronto · aguardando execução do flow regulacao_sinistro

✔ Conferência aprovada sem toque humano

sinistro AUT-30418 · 6 campos cruzados · confiança global 0,97 · decisão registrada no core com trilha de auditoria
Placa BO = placa apólice
RGT-7H42 = RGT-7H42
✓ 0,99
Sinistro dentro da vigência
14/05/2026 ∈ 01/03/2026 → 01/03/2027
✓ 1,00
Ocorrência coberta
colisão ∈ coberturas contratadas
✓ 0,98
Condutor do BO = titular da CNH
M. ANDRADE ≈ MARIANA ANDRADE
✓ 0,97
Titular da CNH = segurado
MARIANA ANDRADE = MARIANA ANDRADE
✓ 0,96
Habilitação válida e compatível
categoria B · válida até 12/08/2029
✓ 0,99

Roteiro da apresentação · 15 minutos

Sequência pensada para a reunião com o cliente. O momento decisivo é o passo 4: a tela muda na frente dele e o mesmo meta-modelo continua funcionando — exatamente o que quebraria qualquer RPA.

1 · Contexto — 2 min
A cola humana

Mostrar a faixa de números no topo: 30 mil sinistros/mês, 4 conferências por sinistro, ~159 FTEs só no cara-crachá. O problema não é sistema, é gente conferindo papel.

2 · O meta-modelo — 3 min
Ler o YAML em voz alta

"Repare: nenhuma coordenada, nenhum seletor. Só o que um humano diria ao explicar o processo por telefone. Quando a tela mudar, este arquivo não muda."

3 · Execução 1 — 3 min
▶ Executar caso

Rodar a simulação acompanhando o log: extração do BO, grounding do campo no CoreSeg, leitura da apólice, cruzamento com a CNH e o veredito com confiança.

4 · A quebra — 4 min
⚡ Redesenhar + executar de novo

Clicar em "Redesenhar tela do CoreSeg" (campos mudam de lugar, rótulos mudam, visual muda). Executar o mesmo caso. No log: o cache falha, o VLM reencontra os campos. Funciona. Esse é o "uau".

5 · Fechamento — 3 min
Proposta de PoC

Mapear a esteira real do cliente (diagnóstico AS-IS), PoC controlada no recorte BO × apólice × CNH, medindo acurácia contra o baseline. Auditoria e HITL desde o desenho.

Frase de fechamento sugerida "Um RPA grava onde o campo estava. O ScreenAgent sabe o que o campo é. Por isso a atualização do CoreSeg que aposentaria um robô inteiro, aqui, custou zero linhas de manutenção."

Mesmo processo, documento de outro estado.

Desta vez o que muda não é a tela do sistema — é o documento. O sinistro AUT-30577 chega com um Registro de Ocorrência da Polícia Militar de MG: outro emissor, outro formato, outras palavras, campos em outras posições. Observe a reação do RPA (painel vermelho) e a do ScreenAgent (console à direita) diante do mesmo documento.

O que mudou
Não foi a tela — foi o documento

O BO de SP virou um R.O. de MG: "Condutor" virou "Motorista envolvido", a placa está em outra posição, o papel é outro.

RPA tradicional
Template por posição ✕ quebra

O robô lê a placa na coordenada do layout de SP. No R.O. de MG, lê o número do registro — e joga o sinistro na fila manual.

ScreenAgent
Intenção semântica ✓ funciona

O SDL diz "número da placa do veículo no boletim". O VLM encontra esse dado em qualquer layout. Alterações no meta-modelo: zero.

velocidade
Documentos do sinistro AUT-30577 · formato nunca visto
NOVO
REGISTRO DE OCORRÊNCIAPMMG · 15º BPM · R.O. MG-2026-0771234
TipoACIDENTE DE TRÂNSITO — COLISÃO
Data/hora do fato22/06/2026 · 07:45
EndereçoRODOVIA BR-040, KM 512 · BELO HORIZONTE/MG
Placa do automóvelPQR-3B21 · FIAT ARGO
Motorista envolvidoCARLOS SOUZA
HistóricoCondutor trafegava pela BR-040 sentido norte quando colidiu na traseira do veículo à frente, com danos materiais…
VIA ELETRÔNICA · ASSINADO DIGITALMENTE
NOVO
Carteira Nacional de Habilitaçãocnh_carlos.jpg
Nome
CARLOS SOUZA
Nº registro
088 411 ***
Categoria
B
Validade
03/11/2028
RPA TRADICIONAL · MESMO SINISTRO
rpa_sinistros v2.3 · aguardando documento…
Sistema alvo · o mesmo CoreSeg de sempre
CoreSeg 6.2 — [Consulta de Apólice]
CONSULTA DE APÓLICE POR PLACA
ApóliceSeguradoPlacaVigênciaSituaçãoCoberturas
4471-0041255 CARLOS SOUZA PQR-3B21 10/01/2026 a 10/01/2027 ATIVA COLISÃO · ROUBO/FURTO · RCF
✔ Sinistro AUT-30577 · decisão registrada: COBERTURA CONFIRMADA · fila de despacho
ScreenAgent · console de execução
  • 1Extrair dados do R.O. (layout nunca visto)
  • 2Consultar apólice no CoreSeg
  • 3Validar cobertura: R.O. × apólice
  • 4Conferir CNH: foto × R.O. × apólice
  • 5Registrar decisão e trilha de auditoria
O meta-modelo usado · o mesmo, sem alterações
# sinistros-auto.sdl.yaml v1.0 — nenhuma linha alterada para este documento inputs: - boletim_ocorrencia: # qualquer emissor, qualquer layout placa: "Número da placa do veículo no boletim" condutor: "Nome do condutor declarado no boletim" data: "Data e hora do acidente" tipo: "Natureza da ocorrência (colisão, roubo…)"
Log do agente · leitura por compreensão
SYSconsole pronto · aguardando execução do flow regulacao_sinistro

✔ Conferência aprovada sem toque humano

sinistro AUT-30577 · 6 campos cruzados · confiança global 0,95 · documento de layout nunca visto · 0 alterações no meta-modelo
Placa R.O. = placa apólice
PQR-3B21 = PQR-3B21
✓ 0,98
Sinistro dentro da vigência
22/06/2026 ∈ 10/01/2026 → 10/01/2027
✓ 1,00
Ocorrência coberta
colisão ∈ coberturas contratadas
✓ 0,97
Condutor do R.O. = titular da CNH
CARLOS SOUZA = CARLOS SOUZA
✓ 0,96
Titular da CNH = segurado
CARLOS SOUZA = CARLOS SOUZA
✓ 0,95
Habilitação válida e compatível
categoria B · válida até 03/11/2028
✓ 0,99
RPA tradicional neste documento: ✕ exceção → fila manual · ~12 min de FTE · risco no SLA ScreenAgent: ✓ touchless · ~5s · zero linhas de manutenção no processo

Treinar o agente = gravar + revisar.

Mockup do módulo Studio: o analista executa o processo uma única vez, como faz hoje, e a IA assiste à gravação propondo o meta-modelo peça por peça. O humano revisa cada proposta e publica. Nenhuma linha de código, nenhum seletor, nenhuma coordenada.

1 · Grave
Execute uma vez, normalmente

O analista abre o BO e o CoreSeg e faz a consulta como sempre fez. O Studio registra cada toque na tela.

2 · Revise
A IA propõe, o humano aprova

Para cada elemento tocado, a IA identifica a tela, nomeia o campo e propõe a intenção semântica. O analista ajusta o texto se quiser e aceita.

3 · Publique
O SDL passa a guiar tudo

O meta-modelo é versionado (Git) e vira o roteiro de todas as execuções — inclusive a da aba Simulação.

Comparação direta: treinar um processo em RPA tradicional leva semanas de desenvolvimento e quebra a cada mudança de tela. Aqui: ~20 minutos de gravação + revisão, feitos por um analista de negócio — e o resultado sobrevive ao redesign do sistema.
Mesa de gravação · faça o processo como faria normalmente

BOLETIM DE OCORRÊNCIA SINISTRO AUT-30418

Data/fato14/05/2026 · 22:10
VeículoRGT-7H42 · HONDA CIVIC
CondutorM. ANDRADE
CoreSeg 6.2 — [Consulta de Apólice]
CONSULTA DE APÓLICE POR PLACA
ApóliceSeguradoPlacaVigênciaSituaçãoCoberturas
4471-0039281 MARIANA ANDRADE RGT-7H42 01/03/2026 a 01/03/2027 ATIVA COLISÃO · ROUBO/FURTO · RCF
Studio · captura e geração do meta-modelo
aguardando início da gravação
SDL gerado em tempo real