Acompanhar o desempenho
A monitorização mostra se uma solução continua a funcionar como previsto.
Continue a acompanhar o desempenho das soluções de IA depois de integrarem os processos de trabalho.
Após a entrada em funcionamento, os dados, a utilização e o comportamento do modelo podem mudar. Sem monitorização, não é claro se a aplicação continua a fazer aquilo para que foi criada. A monitorização de IA acompanha o desempenho, a utilização e os indicadores de risco relevantes de uma aplicação.
Uma aplicação só faz sentido quando corresponde a uma tarefa concreta e à informação disponível para a realizar.
Os indicadores necessários dependem do caso de uso e das possíveis consequências dos erros. Por isso, definimos antecipadamente o que a solução deve e não deve fazer, como será verificado o resultado e quem continua a ser responsável.
A monitorização mostra se uma solução continua a funcionar como previsto.
As alterações nos dados, modelos ou sistemas podem ser avaliadas de forma direcionada.
Os acordos definem quem é responsável e como são tratados os incidentes e as melhorias.
Determinamos até que ponto a solução é crítica para a organização.
Definimos responsabilidades, indicadores e ações de acompanhamento.
Acompanhamos o desempenho relevante, os dados e os sinais operacionais.
Organizamos a recuperação e a avaliação das alterações.
Melhoramos a solução com base na sua utilização e em necessidades mensuráveis.
Este serviço é relevante para organizações com aplicações de IA em produção. A configuração exata depende do processo, dos dados disponíveis e dos riscos associados à aplicação.
Por isso, começamos por uma aplicação bem delimitada e só alargamos o âmbito quando a configuração inicial funciona na prática.
Este serviço responde à seguinte questão: como acompanhar o desempenho, a utilização e os indicadores de risco relevantes de uma aplicação? A abordagem concreta depende do processo e dos dados disponíveis.
O serviço pode ser relevante para organizações com aplicações de IA em produção. Uma necessidade concreta e informação utilizável são mais importantes do que a dimensão da organização.
Depende da aplicação escolhida. Começamos pela questão a que é preciso responder e, depois, determinamos que dados ou fontes são necessários e adequados.
Não. Para tarefas fixas e previsíveis, a automatização convencional pode ser suficiente. Escolhemos a abordagem mais simples que responde adequadamente à questão e só acrescentamos complexidade quando é necessário.
Delimitamos o âmbito da aplicação, validamos os resultados com os utilizadores e implementamos controlos adequados. Após a entrada em funcionamento, acompanhamos o seu desempenho e ajustamos a solução quando os dados, a utilização ou o contexto mudam.
Quer explorar por onde faz sentido começar com a monitorização de IA? Em conjunto, analisamos o desafio, a informação disponível e os requisitos.