DataOps: Otimização da experiência de dados
Este blog foi de autoria de Monica Kimbrough com suporte de Gina Noel D’Ambrosio
Passei mais de duas décadas liderando transformações em toda a empresa para empresas Fortune 200. Durante esse período, desenvolvi uma compreensão profunda dos benefícios da otimização da experiência de dados para produzir resultados bem-sucedidos.
John G. Schmidt, meu parceiro de negócios de longa data, e Kirit Basu são dois líderes renomados no espaço de dados e escreveram um livro inovador explorando o assunto. Em DataOps: A edição autorizada define os recursos, metodologias, práticas e tecnologias necessárias para lidar com operações e gerenciamento de dados.
“DataOps é a aplicação de práticas de DevOps para infraestruturas de dados com uma única ressalva; ela precisa acomodar a mudança em um ritmo muito mais rápido do que o que era capaz em anos anteriores.”
Voltar ao básico
Vamos começar focando em alguns conceitos importantes:
- Os aplicativos desempenham um papel crucial no suporte e na automação de várias funções e atividades. Eles facilitam a criação, a utilização e a troca de informações e dados. Os dados, quando considerados sozinhos, não têm valor inerente. No entanto, ela se transforma em informações significativas quando colocada em um contexto, definido por sua aplicabilidade, circunstâncias, condições e pelas diretrizes que envolvem sua criação, uso, segurança, governança e descarte.
- Documentos gerados por pessoas, como cartas de amor, descrições de cargos e relatórios policiais, servem como exemplos de informações. Ao converter esses documentos em um repositório estruturado, possibilitamos uma série de ações: Os dados podem ser pesquisados, editados, armazenados, protegidos, criptografados, duplicados, regidos e, por fim, descartados. Esse conjunto de operações é facilmente gerenciado por computadores.
- Por meio da análise de dados, podemos descobrir comportamentos, tendências e padrões importantes. Esses insights aprofundam nossa compreensão de como os dados se relacionam com as informações.
O papel das operações de dados
O DataOps carrega e mantém elementos de dados, como contexto e relacionamentos, para que os aplicativos possam dar suporte à lógica de processamento de informações. Isso abrange várias funções principais, incluindo:
- Arquivamento, subconjunto, retenção e eliminação de dados conforme necessário
- Supervisionar o movimento e a troca de dados entre sistemas de aplicativos e datatores
- Identificar e coordenar o impacto das mudanças em sistemas interconectados
- Executar o tratamento de exceções para operações de entrega de dados, garantia de qualidade e medidas de segurança
Por que isso é importante
À medida que as organizações embarcam em iniciativas de transformação digital, é crucial identificar processos de negócios e serviços associados que possam melhorar o desempenho e a experiência do usuário em plataformas digitais. Garantir que as informações e os modelos de dados sejam bem mantidos e otimizados continuamente é essencial. É aqui que a DataOps desempenha um papel vital. Ele automatiza processos que ajudam a esclarecer e interpretar os dados, avaliando dados brutos para insights e tendências, além de implementar as funções necessárias para dar suporte à lógica de processamento.
A chave para o sucesso da transformação digital
Ao longo dos meus anos apoiando empresas que passaram por grandes transformações digitais, testemunhei diferentes graus de maturidade ao lidar com os desafios de dados que essas transformações apresentam. No final das contas, é exatamente essa maturidade que determinará o sucesso ou o fracasso.
A transformação digital envolve várias camadas, incluindo:
- Identificação das principais iniciativas
- Definir quais funções são afetadas pelas iniciativas e incluídas no escopo
- Análise dos titulares de informações que serão gerados e utilizados pelas funções em escopo
- Desenvolvimento do modelo de dados para apoiar essas iniciativas
Finalmente, a organização deve enfrentar os desafios de sustentar um modelo de dados robusto após a mudança para o novo modelo operacional e plataforma digital. Essa tarefa se torna exponencialmente mais difícil quando trocas de informações são necessárias entre cenários de aplicativos situados em diversos ambientes. Essa complexidade cria a necessidade de uma solução híbrida.
Nas publicações subsequentes do blog, analisaremos mais detalhadamente essas complexidades. Vamos explorar o importante papel que a DataOps desempenha na manutenção da integridade do modelo de dados e as funções necessárias na organização para realizá-lo.
Também veremos como a automação da tecnologia pode transformar as responsabilidades normalmente executadas por pessoas e como a tecnologia da Pure Storage pode ajudar você a lidar com essas complexidades. Vamos discutir como a evolução da sua infraestrutura em direção a uma plataforma de gerenciamento de dados, ou até mesmo uma nuvem de dados corporativos, é um passo essencial para obter controle holístico sobre seus dados e simplificar o gerenciamento.