Develop Curation Plans
O desenvolvimento de planos para curadoria e melhoria dos modelos é um passo essencial na garantia da eficácia contínua das soluções de AI e ML, e deforma conceitual, também para outras tecnologias avançadas.
Este processo envolve a criação de um plano estruturado que detalha as atividades de monitoramento, avaliação e aprimoramento dos modelos.
O plano deve considerar as necessidades específicas da organização, os objetivos de negócios e os critérios de desempenho esperados.
Além disso, é crucial incluir uma análise de risco e um cronograma de execução para assegurar que todas as etapas sejam realizadas de forma eficiente e eficaz.
O processo também deve prever a capacitação das equipes envolvidas, assegurando que todos compreendam suas responsabilidades e as metas a serem alcançadas.
O desenvolvimento desses planos é fundamental para assegurar uma abordagem sistemática e proativa na curadoria e melhoria dos modelos, garantindo que eles continuem a agregar valor à organização.
- PDCA focus: Plan
- Periodicidade: Anual
# | Nome da Atividade | Descrição | Inputs | Outputs | RACI | DARE |
1 | Define Curation Objectives | Definir os objetivos de curadoria e melhoria dos modelos. | Necessidades de negócios, metas estratégicas | Objetivos de curadoria definidos | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
2 | Assess Model Performance | Avaliar o desempenho atual dos modelos em uso. | Dados de desempenho, feedback dos usuários | Relatório de desempenho | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Solution Engineering & Development; Informed: Cybersecurity | Decider: Data, AI & New Technology; Advisor: Solution Engineering & Development; Recommender: Cybersecurity; Executer: Data, AI & New Technology |
3 | Develop Curation Strategies | Desenvolver estratégias para monitoramento, avaliação e melhoria contínua dos modelos. | Objetivos de curadoria, análise de desempenho | Estratégias de curadoria | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Infrastructure & Operation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Infrastructure & Operation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
4 | Create Implementation Timeline | Criar um cronograma detalhado para a execução do plano de curadoria. | Estratégias de curadoria, análise de riscos | Cronograma de implementação | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
5 | Establish Training Programs | Desenvolver programas de treinamento para as equipes envolvidas na curadoria e melhoria dos modelos. | Necessidades de treinamento, recursos de treinamento | Programas de treinamento | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
Identify Improvement Opportunities
A identificação de oportunidades para melhoria dos modelos existentes é um processo crucial para assegurar que as soluções de AI e ML continuem a atender às necessidades da organização e adaptem-se às mudanças no ambiente de negócios.
Este processo envolve a análise contínua do desempenho dos modelos, a coleta de feedback dos usuários e a realização de pesquisas sobre novas tecnologias e metodologias.
O objetivo é identificar áreas onde os modelos podem ser aprimorados, seja por meio de ajustes nos algoritmos, atualização de dados de treinamento ou incorporação de novas técnicas de aprendizado.
Este processo também deve considerar os riscos e as implicações de segurança associados a qualquer mudança proposta.
A identificação proativa de oportunidades de melhoria é fundamental para manter a relevância e a eficácia dos modelos em um ambiente dinâmico.
- PDCA focus: Plan
- Periodicidade: Trimestral
# | Nome da Atividade | Descrição | Inputs | Outputs | RACI | DARE |
1 | Collect Performance Data | Coletar dados de desempenho dos modelos em uso. | Modelos implementados, métricas de desempenho | Dados de desempenho | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
2 | Analyze Feedback | Analisar o feedback dos usuários sobre o desempenho e eficácia dos modelos. | Feedback dos usuários, dados de desempenho | Relatório de feedback | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Solution Engineering & Development; Informed: Cybersecurity | Decider: Data, AI & New Technology; Advisor: Solution Engineering & Development; Recommender: Cybersecurity; Executer: Data, AI & New Technology |
3 | Research New Technologies | Pesquisar novas tecnologias e metodologias que possam ser aplicadas para melhorar os modelos. | Relatório de feedback, tendências de mercado | Relatório de pesquisa | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Infrastructure & Operation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Infrastructure & Operation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
4 | Identify Potential Improvements | Identificar possíveis melhorias nos modelos baseadas na análise de desempenho e pesquisa. | Relatório de pesquisa, análise de desempenho | Plano de melhorias | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Cybersecurity; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: Cybersecurity; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
5 | Prioritize Improvement Opportunities | Priorizar as oportunidades de melhoria com base no impacto potencial e viabilidade. | Plano de melhorias, análise de viabilidade | Lista priorizada de melhorias | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
Execute Model Improvements
A execução das melhorias nos modelos conforme planejado é uma etapa fundamental para garantir que as soluções de AI e ML continuem a fornecer valor e a se adaptar às mudanças nas condições de negócios e dados.
Este processo envolve a implementação das melhorias identificadas, que podem incluir ajustes nos algoritmos, atualização dos dados de treinamento, implementação de novas técnicas de aprendizado e otimização dos processos de inferência.
Cada melhoria deve ser testada rigorosamente para assegurar que ela realmente melhora o desempenho e a precisão dos modelos sem introduzir novos problemas.
Além disso, este processo deve garantir que as equipes estejam bem treinadas e preparadas para operar e manter os modelos melhorados.
A execução eficiente e eficaz dessas melhorias é crucial para manter a competitividade e a relevância dos modelos em um ambiente dinâmico.
- PDCA focus: Do
- Periodicidade: Contínua
# | Nome da Atividade | Descrição | Inputs | Outputs | RACI | DARE |
1 | Implement Algorithm Adjustments | Implementar ajustes nos algoritmos dos modelos conforme necessário. | Plano de melhorias, especificações técnicas | Algoritmos ajustados | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Solution Engineering & Development; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: Solution Engineering & Development; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
2 | Update Training Data | Atualizar os dados de treinamento dos modelos para refletir as mudanças nas condições de negócios. | Dados de treinamento atualizados, plano de melhorias | Dados de treinamento atualizados | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Infrastructure & Operation; Informed: Cybersecurity | Decider: Data, AI & New Technology; Advisor: IT Infrastructure & Operation; Recommender: Cybersecurity; Executer: Data, AI & New Technology |
3 | Implement New Techniques | Implementar novas técnicas de aprendizado para melhorar a eficácia dos modelos. | Plano de melhorias, novas técnicas | Técnicas implementadas | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
4 | Test Improvements | Testar rigorosamente as melhorias implementadas para assegurar sua eficácia. | Melhorias implementadas, plano de testes | Resultados de testes | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Cybersecurity; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: Cybersecurity; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
5 | Deploy Improved Models | Desplegar os modelos melhorados em produção, assegurando que estejam totalmente operacionais. | Resultados de testes, plano de implementação | Modelos melhorados em produção | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
Monitor Model Performance
O monitoramento contínuo do desempenho dos modelos é essencial para garantir que eles continuem a funcionar conforme o esperado e a fornecer valor contínuo à organização.
Este processo envolve a coleta e análise de dados de desempenho em tempo real, a identificação de quaisquer desvios ou problemas e a implementação de ações corretivas quando necessário.
O monitoramento deve ser abrangente, incluindo tanto métricas quantitativas quanto feedback qualitativo dos usuários.
Além disso, este processo deve incluir a revisão regular dos dados de entrada e saída dos modelos para garantir a integridade e a qualidade dos dados.
O objetivo é manter um ciclo contínuo de avaliação e melhoria que assegure que os modelos permaneçam precisos, eficazes e alinhados com os objetivos de negócios da organização.
- PDCA focus: Check
- Periodicidade: Contínua
# | Nome da Atividade | Descrição | Inputs | Outputs | RACI | DARE |
1 | Collect Real-Time Performance Data | Coletar dados de desempenho em tempo real dos modelos em uso. | Modelos implementados, métricas de desempenho | Dados de desempenho | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
2 | Analyze Performance Data | Analisar os dados de desempenho para identificar tendências e problemas. | Dados de desempenho, feedback dos usuários | Relatório de análise | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Solution Engineering & Development; Informed: Cybersecurity | Decider: Data, AI & New Technology; Advisor: Solution Engineering & Development; Recommender: Cybersecurity; Executer: Data, AI & New Technology |
3 | Identify Deviations | Identificar quaisquer desvios ou problemas no desempenho dos modelos. | Relatório de análise, dados de desempenho | Relatório de desvios | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Infrastructure & Operation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Infrastructure & Operation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
4 | Implement Corrective Actions | Implementar ações corretivas para resolver os problemas identificados. | Relatório de desvios, plano de ações | Ações corretivas implementadas | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Cybersecurity; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: Cybersecurity; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
5 | Review and Report Findings | Revisar e relatar as conclusões do monitoramento aos stakeholders relevantes. | Ações corretivas, relatório de desvios | Relatório de conclusões | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
Update Improvement Plans
A revisão e atualização dos planos de melhoria com base nos resultados obtidos é um processo contínuo que visa garantir que as estratégias de curadoria e melhoria dos modelos permaneçam eficazes e alinhadas com os objetivos de negócios.
Este processo envolve a análise dos resultados do monitoramento de desempenho, a revisão das ações corretivas implementadas e a identificação de novas oportunidades de melhoria.
Os planos de melhoria devem ser ajustados para refletir as lições aprendidas e as mudanças nas condições de negócios.
Além disso, este processo deve incluir a comunicação das atualizações aos stakeholders e a capacitação contínua das equipes envolvidas.
A atualização regular dos planos de melhoria é essencial para manter a eficácia dos modelos de AI e ML e assegurar que a organização continue a extrair valor dessas tecnologias.
- PDCA focus: Act
- Periodicidade: Contínua
# | Nome da Atividade | Descrição | Inputs | Outputs | RACI | DARE |
1 | Review Monitoring Results | Revisar os resultados do monitoramento de desempenho dos modelos. | Dados de monitoramento, relatórios de desempenho | Resultados revisados | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
2 | Assess Improvement Effectiveness | Avaliar a eficácia das melhorias implementadas. | Resultados revisados, feedback dos usuários | Relatório de eficácia | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Solution Engineering & Development; Informed: Cybersecurity | Decider: Data, AI & New Technology; Advisor: Solution Engineering & Development; Recommender: Cybersecurity; Executer: Data, AI & New Technology |
3 | Identify New Improvement Opportunities | Identificar novas oportunidades de melhoria com base na avaliação da eficácia. | Relatório de eficácia, análise de desempenho | Plano de novas melhorias | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Infrastructure & Operation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Infrastructure & Operation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |
4 | Update Improvement Plans | Atualizar os planos de melhoria para refletir as novas oportunidades e lições aprendidas. | Plano de novas melhorias, relatório de eficácia | Planos de melhoria atualizados | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: Cybersecurity; Informed: Architecture & Technology Visioning | Decider: Data, AI & New Technology; Advisor: Cybersecurity; Recommender: Architecture & Technology Visioning; Executer: Data, AI & New Technology |
5 | Communicate Updates | Comunicar as atualizações dos planos de melhoria aos stakeholders relevantes. | Planos de melhoria atualizados, comunicação | Stakeholders informados | Responsible: Data, AI & New Technology; Accountable: Data, AI & New Technology; Consulted: IT Governance & Transformation; Informed: Solution Engineering & Development | Decider: Data, AI & New Technology; Advisor: IT Governance & Transformation; Recommender: Solution Engineering & Development; Executer: Data, AI & New Technology |