O que é o gerenciamento unificado de dados?
O gerenciamento unificado de dados (UDM) é um processo em que várias fontes de dados diferentes são consolidadas para criar uma única fonte de dados, armazenada em um data warehouse. Essa estratégia de gerenciamento de dados incorpora pessoas, processos e tecnologia para tratar tanto o modelo de silo de dados que evoluiu ao longo do tempo quanto as enormes quantidades de informações processadas pelas organizações, resultando em fadiga de dados.
Historicamente, as organizações desenvolveram seus sistemas de software de forma ad-hoc, instalando uma variedade de diferentes programas e técnicas de gerenciamento de dados e evoluindo à medida que se expandiam. A estrutura resultante é díspar, com ferramentas e dados duplicados que atendem a uma capacidade idêntica. Há dados em silos, desintegrados entre equipes e áreas, com pouca ou nenhuma capacidade de compartilhamento. Isso resulta em acesso insatisfatório aos dados quando necessário, perda de insights de negócios e análise de tendências e aumento dos custos de negócios.
Sob essas circunstâncias fragmentadas e problemáticas, o gerenciamento unificado de dados cria uma estrutura para consolidar informações de várias fontes. Ele faz isso identificando fatores de integração nessas fontes de dados e, em seguida, armazenando-os em um repositório de dados comum em um data warehouse. Isso inicia a integração de dados em todo o sistema em uma única estrutura que oferece suporte à otimização completa dos dados.
O gerenciamento unificado de dados também oferece um espaço comum para limpeza, análise e transformação de dados. Isso é concluído universalmente em todos os dados no warehouse para definir padrões e regras de negócios. O processo de limpeza é vital para ter consistência em todas as áreas do negócio, proporcionando uma melhor conformidade dos dados e melhores insights de negócios.
O sistema de gerenciamento unificado de dados foi comparado a um coração: os dados vêm de várias fontes e são centralizados. Enquanto estiverem no data center, são oxigenados, e o dióxido de carbono indesejado e os produtos residuais – ou falhas, inconsistências e dados incorretos – são removidos. Os dados são então bombeados para os locais onde são necessários: os departamentos que os utilizam.
Como isso acontece em uma organização?
O gerenciamento unificado de dados não é uma ferramenta de software para todas as situações que uma organização pode usar imediatamente. Uma plataforma consiste em várias ferramentas nas disciplinas de gerenciamento de dados, incluindo business intelligence, integração de dados, qualidade de dados, governança de dados e gerenciamento de dados mestres. Para que o gerenciamento unificado de dados seja bem-sucedido, ele deve unir todas essas funções em uma única interface simples que permita a administração e o desenvolvimento. Os servidores precisam de interoperabilidade, e todas as ferramentas precisam dos mesmos artefatos de desenvolvimento, como modelos de dados, metadados e dados mestres.
Um exemplo de gerenciamento unificado de dados em uso é o varejo de roupas online. Uma loja de comércio eletrônico instituiu um sistema de gerenciamento unificado de dados para combinar todos os aspectos das informações de clientes e de marketing. Com isso, todas as informações do cliente foram centralizadas em um único ponto:
- A jornada do cliente no site, usando a análise do site
- Informações sobre campanhas de publicidade e marketing
- Informações de vendas
- Informações do cliente
Usando todo esse conhecimento em conjunto, a empresa descobriu uma série de insights importantes que orientam decisões de negócios. O consumidor costumava visitar o site em seu celular pela manhã, talvez durante o trajeto matinal. Em seguida, fazia login no desktop quando chegava ao trabalho e realizava uma compra.
A empresa mapeou a relação entre os produtos para permitir um marketing melhor. Se uma cliente comprasse um top flutuante e transparente, provavelmente gostaria de comprar uma camiseta simples para usar por baixo. Vincular os dois itens para que um fique visível quando o outro for comprado aumenta as vendas.
Uma análise completa dos dados reais das campanhas de marketing pode revelar alguns dados interessantes e inesperados. As campanhas do Google Adwords que eram consideradas eficazes, quando comparadas com outras campanhas de rede social, descobriram que as estratégias anteriormente descartadas realmente renderam melhores resultados financeiros.
Depois que a jornada de um cliente é rastreada, a empresa pode enviar campanhas de marketing altamente direcionadas e individualizadas para eles. Essas mensagens podem ser entregues via e-mail, rede social ou celular, dependendo das preferências do usuário.
Um sistema de gerenciamento unificado de dados permite grandes ganhos para as empresas, aumentando a receita e a participação de mercado, além de atingir objetivos tradicionais, como diminuir erros de dados e economizar tempo ao tornar os dados acessíveis.
5G e gerenciamento unificado de dados
As redes móveis e a Internet das Coisas (IoT) combinaram-se para criar um gigante da indústria. À medida que o 5G é implantado em todo o mundo, o grande volume de dados de usuário torna-se completamente esmagador. Em qualquer casa padrão, há laptops, celulares, relógios para fitness, impressoras, TVs, carros e até geladeiras, todos transmitindo e recebendo dados. Todos esses dados precisam ser acessados e gerenciados de uma forma que beneficie a rede.
O gerenciamento e o armazenamento de dados tornaram-se questões-chave para os provedores de serviços, e um sistema holístico de gerenciamento unificado de dados está ajudando a gerenciar as metas de dados. Usar a nuvem e dados de usuário centralizados e separar os dados da função ajudou os provedores de rede a gerenciar o que não é gerenciável. Os benefícios do gerenciamento unificado de dados incluem a redução da complexidade da rede e consistência de dados aprimorada. À medida que o mundo transita de 4G para 5G, a necessidade de gerenciamento unificado de dados aumenta.
Por que uma organização precisa de gerenciamento unificado de dados
Embora possa parecer um exercício de tecnologia – e os requisitos tecnológicos estão presentes – trata-se, na verdade, de estratégia e boa gestão de negócios. O objetivo final do gerenciamento unificado de dados é ser capaz de tomar decisões de negócios orientadas por dados, educadas e objetivas. Trata-se de excelência operacional, garantindo que governança, conformidade, integração e transformação de negócios aconteçam de forma consistente e para o máximo benefício da organização e da equipe. Trata-se de business intelligence; onde está o negócio agora e como ele pode ser melhor?
Há um equilíbrio que precisa ser alcançado entre dois objetivos distintos: ter excelentes práticas de gerenciamento de dados e alinhar isso com os objetivos do negócio.
Acesso a dados no gerenciamento unificado de dados
Qualquer parte interessada interna ou externa deve ser capaz de acessar as informações de que precisa. Os dados devem ser relevantes, fáceis de localizar e precisos. Isso significa que um sistema unificado de gerenciamento de dados fornece a todos os usuários os dados necessários para solicitar um produto, saber se ele está em estoque, faturar um cliente, avaliar uma reclamação ou realizar um milhão de outras tarefas. Os silos de dados são coisa do passado, com todos os setores de uma organização conectados.
Precisão de análise no gerenciamento unificado de dados
Não faz sentido realizar análises ou previsões se os dados forem falhos ou incompletos. Isso resulta em informações incorretas, perda de tempo para cientistas de dados e usuários finais dos relatórios e representa um grande risco para os negócios. O gerenciamento unificado de dados permite insights em tempo real, novas oportunidades e decisões totalmente otimizadas.
Componentes do gerenciamento unificado de dados bem-sucedido
Um gerenciamento unificado de dados bem-sucedido não é simplesmente obter os elementos técnicos corretos e ter todos os dados armazenados de maneira acessível. Ele precisa satisfazer dois componentes.
Coordenação do gerenciamento de dados diversificados
É preciso haver um equilíbrio entre a interoperabilidade dos servidores e o desenvolvimento de dados entre as equipes. O gerenciamento unificado de dados pode compartilhar e unificar a infraestrutura técnica usando componentes de arquitetura de dados relevantes. Fazer isso deve resultar em uma prática holística, colaborativa e unificada. Só então os dados podem ser aproveitados em escala corporativa.
Apoio aos objetivos estratégicos de negócios
Há dois aspectos: a equipe de gerenciamento deve entender claramente quais são os objetivos do negócio e esses objetivos precisam ser traduzidos em requisitos de dados. Deve haver um alinhamento entre gestão e tecnologia. Se a gestão precisar de dados em um determinado período de tempo, ou se precisar atender a determinados marcos, isso precisa ser esclarecido e comunicado.
Gerenciamento unificado de dados por qualquer outro nome
O gerenciamento unificado de dados não é um termo muito comum, mas seus princípios são praticados por muitos. A maioria das organizações já está implementando práticas e estratégias de gerenciamento unificado de dados, mas muitas vezes usa outro nome. Muitas empresas não têm um nome para sua disciplina de gerenciamento de dados, mas quando questionadas sobre suas estratégias, os processos e resultados se alinham com o gerenciamento unificado de dados.
EIM e EDM
Enterprise Information Management (EIM) e Enterprise Data Management (EDM) são dois termos que são comumente usados quando gerenciamento unificado de dados seria mais apropriado. Muitas vezes, esses termos estão vinculados a fornecedores de software comercial que os promovem erroneamente. Esses termos também têm escopo mais restrito, girando em torno das práticas de gerenciamento, integração e recuperação de dados, e não no pacote holístico e nos benefícios para os negócios.
Gerenciamento rápido de dados mestres
O gerenciamento de dados mestres (MDM) é quando os negócios e a tecnologia da informação trabalham juntos para garantir que os dados mestres sejam precisos e consistentes e que haja responsabilidade por eles dentro da organização. Embora tenha semelhanças com o gerenciamento unificado de dados, é menos focado em vincular-se aos objetivos e ideais de negócios e mais em estratégias e programas para aumentar a precisão dos dados em toda a empresa.
Governança de dados e informações
A governança de dados e informações não é sobre os sistemas técnicos usados para gerenciar software, mas sobre ética, padrões e regras em torno dos dados. A governança está mais preocupada com a definição de uso, acesso à informação, segurança, ciclo de vida e categorização. Ela tem um papel mais teórico no planejamento e auxilia na tomada de decisões sobre como os dados são gerenciados, mas em si não é um sistema de gerenciamento.
Benefícios do gerenciamento unificado de dados
Evita sobrecarga de informações
Os dados estão em toda parte. Os volumes de dados criados e consumidos pelas organizações são vastos, desde redes sociais, avaliações, vídeos e fontes externas de informações até informações internas de compras e coleta de dados de clientes. Não é incomum que as empresas lidem com terabytes de dados todos os dias, e isso pode ser completamente esmagador para pessoas e sistemas.
O gerenciamento unificado de dados trabalha para minimizar o volume. Os dados são recebidos, processados e armazenados no local certo, e em apenas em um local. Isso torna todo o processo menos opressivo e o gerenciamento de dados um objetivo muito mais realizável.
Informações de negócios e análise de tendências
Um dos principais objetivos do gerenciamento unificado de dados são informações de negócios e análise precisa de tendências. O gerenciamento unificado de dados transforma e limpa os dados e cria um conjunto de dados utilizável para gerar informações. Ele também organiza os dados em um local e forma acessíveis, tornando-os muito mais utilizáveis. Isso leva a uma inovação ágil baseada em dados e a informações de negócios que de outra forma não seriam possíveis.
Custos reduzidos
Há uma variedade de maneiras pelas quais o gerenciamento unificado de dados reduz as despesas gerais dos negócios:
- Sem duplicação de dados ou silos de dados; economize em erros e informações ausentes
- Como o gerenciamento unificado de dados é amplamente baseado em nuvem, não há necessidade de investimento em hardware e servidores caros
- Melhores análises e previsões de negócios permitem decisões informadas com maior probabilidade de levar ao crescimento
- Como os dados são limpos automaticamente, há menos perda de tempo para cientistas de dados e outros recursos valiosos
Conformidade regulatória
Os dados são um grande negócio, sem dúvida o maior atualmente. Toda uma série de leis e regras de negócios foram criadas para tentar gerenciar isso. As organizações não apenas precisam gerenciar os dados em si, mas eles precisam ser gerenciados de forma a mantê-los seguros e em conformidade com todas as regulamentações. O gerenciamento unificado de dados aplica regras automaticamente aos dados; portanto, não há chance de não conformidade. Reduzir o risco de multas e não conformidade é essencial para as melhores práticas de negócios e para manter uma marca confiável para clientes e fornecedores.
Desafios do gerenciamento unificado de dados
Escopo muito amplo
Uma organização que tentar unificar todos os seus dados em um único processo falhará. Esse processo não foi projetado para ser uma maravilha em uma só tacada, com uma ferramenta que unifica tudo.
Solução: é improvável que uma organização queira coordenar 100% de seus dados, e essa pode ser uma meta impossível. Em vez de tentar fazer tudo de uma vez, resolva o problema em etapas lógicas. Junte algumas partes do sistema de cada vez e trabalhe de forma incremental, construindo o sistema até que ele seja unificado em um nível que atenda às metas de gerenciamento. Escolha unir apenas os itens cuja colaboração e coordenação criem benefícios.
Falta de flexibilidade
Um dos maiores problemas com qualquer arquitetura de dados é a falta de flexibilidade. Se uma organização é um provedor de serviços médicos, a infraestrutura precisa ser capaz de lidar com milhões de transmissões ao vivo de dados de monitoramento, precisa ser capaz de adicionar produtos facilmente e gerenciar os dados corretamente. Softwares, fontes de dados e tipos de dados estão mudando constantemente para todas as organizações, e qualquer sistema de gerenciamento de dados precisa ser incrivelmente ágil para permanecer relevante.
Solução: manter os dados na nuvem, usar os aplicativos com sabedoria e não forçar uma estrutura rígida no sistema ajuda bastante a manter os resultados fluidos. Os dados e as necessidades de negócios devem ditar a arquitetura, não a infraestrutura em si. Usando tecnologia autônoma, verifique e mantenha a integridade e o desempenho em todo o sistema e otimize o sistema quando necessário.
Padrões de dados e ambiguidade de governança
Existem leis, padrões e diretrizes em quase todos os aspectos da coleta, armazenamento e distribuição de dados. Definir os padrões para o negócio pode ser um dos aspectos mais desafiadores da criação de um sistema de gerenciamento unificado de dados. A implementação da legislação pode ser cara e trabalhosa, especialmente em organizações complexas. As leis de conformidade estão mudando constantemente para atender às necessidades em rápido crescimento de um mundo cada vez mais conectado.
Soluções: o sistema deve ser projetado e desenvolvido com o envolvimento de especialistas em governança, cientistas de dados, profissionais de tecnologia da informação e empresários. Não há uma maneira simples de fazer isso, a não ser estabelecer uma boa administração de dados desde o início e não tomar atalhos. As informações de identificação pessoal devem receber atenção especial, sendo rastreadas e monitoradas quanto à conformidade com os regulamentos de privacidade. Ferramentas que rastreiam e revisam dados enquanto identificam cadeias de conexão e monitoram a conformidade são vitais.
Falta de entendimento dos dados
É comum que uma organização entenda mal seus dados, o que se torna caro quando as informações são armazenadas e nunca utilizadas. Assim, as empresas ficam em dúvida sobre como esses dados podem ser usados ou reaproveitados, tornando o processamento de dados um desperdício de recursos.
Soluções: a criação de uma camada de descoberta ajuda a identificar os dados existentes e os torna acessíveis e utilizáveis.