{"id":817822,"date":"2023-09-26T13:20:11","date_gmt":"2023-09-26T13:20:11","guid":{"rendered":"https:\/\/www.questionpro.com\/blog\/?p=817822"},"modified":"2023-09-26T13:20:28","modified_gmt":"2023-09-26T13:20:28","slug":"data-fabric","status":"publish","type":"post","link":"https:\/\/qa-release.questionpro.com\/blog\/pt-br\/data-fabric\/","title":{"rendered":"Data Fabric: o que \u00e9, dicas e pr\u00e1ticas recomendadas"},"content":{"rendered":"\n
A Gartner<\/a> nomeou a estrutura de dados para auxiliar as empresas na monitoriza\u00e7\u00e3o e gest\u00e3o dos seus dados e aplica\u00e7\u00f5es. A recolha de dados e a transforma\u00e7\u00e3o numa organiza\u00e7\u00e3o orientada por dados s\u00e3o agora mais desafiantes do que nunca, \u00e0 medida que as empresas recorrem a uma vasta gama de aplica\u00e7\u00f5es e os dados se tornam mais din\u00e2micos.<\/p>\n\n\n\n As empresas necessitam de uma estrat\u00e9gia abrangente entre as dez principais evolu\u00e7\u00f5es tecnol\u00f3gicas em dados e an\u00e1lises para enfrentar tais desafios. Dados provenientes de diversas fontes e tipos s\u00e3o integrados para criar uma fonte virtual unificada. Este acesso e partilha cont\u00ednua de dados numa infraestrutura distribu\u00edda s\u00e3o poss\u00edveis gra\u00e7as a esta arquitetura integrada, independentemente da aplica\u00e7\u00e3o, da plataforma ou do local de armazenamento.<\/p>\n\n\n\n Neste blog, abordaremos o que \u00e9 o Data Fabric, a sua relev\u00e2ncia, dicas e melhores pr\u00e1ticas.<\/p>\n\n\n\n LEIA TAMB\u00c9M:<\/strong> Efic\u00e1cia dos dados de amostragem em inqu\u00e9ritos online<\/a><\/p>\n\n\n\n O Data Fabric \u00e9 uma arquitetura integrada que utiliza os dados para proporcionar aos endpoints num ambiente h\u00edbrido de v\u00e1rias nuvens uma capacidade consistente. Esta arquitetura integrada aumenta a visibilidade, o acesso e o controlo, estabelecendo m\u00e9todos consistentes para a estrat\u00e9gia de gest\u00e3o de dados. O mais importante, cria consist\u00eancia em todo o ambiente, permitindo que os dados sejam utilizados e partilhados em qualquer local.<\/p>\n\n\n\n Esta arquitetura integrada \u00e9 a principal ferramenta para muitas empresas transformarem dados brutos em intelig\u00eancia de neg\u00f3cios acion\u00e1vel. Facilita a an\u00e1lise, especialmente para a utiliza\u00e7\u00e3o de IA<\/a> e aprendizagem autom\u00e1tica. Dado que pode reduzir os esfor\u00e7os de gest\u00e3o de dados at\u00e9 70%, o Gartner selecionou-a como a sua principal tend\u00eancia tecnol\u00f3gica estrat\u00e9gica para 2022.<\/p>\n\n\n\n LEIA TAMB\u00c9M: <\/strong>Como fazer estudos de segmenta\u00e7\u00e3o de mercado?<\/a><\/p>\n\n\n\n As empresas frequentemente copiam os seus dados para os consolidar num \u00fanico local, o que \u00e9 dispendioso e pode causar problemas de conformidade e seguran\u00e7a de dados ao longo de todo o ciclo de vida dos dados. No entanto, ainda existem boas raz\u00f5es para combinar esses dados. Diversas empresas podem optar por utilizar uma malha de dados como uma solu\u00e7\u00e3o arquitet\u00f3nica para lhes permitir:<\/p>\n\n\n\n As organiza\u00e7\u00f5es n\u00e3o conseguem aproveitar completamente o valor dos seus dados devido a quest\u00f5es que incluem o acesso limitado aos dados (ou seja, os dados n\u00e3o est\u00e3o acess\u00edveis a quem deles necessita) e \u00e0 complexidade da integra\u00e7\u00e3o de dados.<\/p>\n\n\n\n A integra\u00e7\u00e3o de dados tradicional j\u00e1 n\u00e3o \u00e9 adequada para as necessidades empresariais, como transforma\u00e7\u00f5es universais e conectividade em tempo real. Muitas empresas necessitam de ajuda para combinar, integrar e transformar dados organizacionais de v\u00e1rias fontes.<\/p>\n\n\n\n O Data Fabric oferece aos utilizadores acesso imediato a uma vasta variedade de dados e permite a visualiza\u00e7\u00e3o, independentemente do local onde se encontram. A governan\u00e7a e a gest\u00e3o de dados em cen\u00e1rios de dados multinuvem podem ser simplificadas para os utilizadores atrav\u00e9s da utiliza\u00e7\u00e3o do data fabric.<\/p>\n\n\n\n Os metadados comerciais, operacionais e t\u00e9cnicos devem ser ativamente geridos se uma malha de dados for bem governada. Deve estar dispon\u00edvel a todos os funcion\u00e1rios da empresa um cat\u00e1logo de dados e um l\u00e9xico empresarial para que isso aconte\u00e7a.<\/p>\n\n\n\n Todos dentro da organiza\u00e7\u00e3o podem partilhar o seu conhecimento sobre os dados \u00e0 medida que os utilizam. Deve ser mantido um calend\u00e1rio para que todas as fontes de origem tenham os seus metadados registados a uma taxa que permita um n\u00edvel razo\u00e1vel de desvio de dados<\/a>.<\/p>\n\n\n\n Aqui est\u00e3o algumas dicas e pr\u00e1ticas recomendadas:<\/p>\n\n\n\n Embora os conceitos de DataOps e malha de dados sejam distintos, o DataOps pode desempenhar um papel crucial. Os processos de dados, as ferramentas e as pessoas que utilizam os insights est\u00e3o todos interligados, de acordo com um modelo de processo DataOps.<\/p>\n\n\n\n Os utilizadores est\u00e3o posicionados para confiar continuamente nos dados, aproveitar de forma significativa as ferramentas \u00e0 sua disposi\u00e7\u00e3o e aplicar insights para melhorar as opera\u00e7\u00f5es. Este modelo e o design arquitet\u00f3nico do data fabric trabalham em harmonia. Para aproveitar ao m\u00e1ximo, os utilizadores necessitar\u00e3o de um modelo de processo DataOps e de uma mentalidade DataOps.<\/p>\n\n\n\n Ao construir malhas de dados, o problema t\u00edpico \u00e9 que pode tornar-se apenas mais um reposit\u00f3rio de dados. Se os componentes arquitet\u00f3nicos estiverem implementados (fontes de dados, an\u00e1lises, t\u00e9cnicas de BI, fluxo de dados e consumo de dados), mas faltarem APIs e SDKs, o resultado n\u00e3o ser\u00e1 uma estrutura de dados genu\u00edna.<\/p>\n\n\n\n O termo “estrutura de dados” refere-se a um projeto arquitet\u00f3nico e n\u00e3o a uma tecnologia espec\u00edfica. As caracter\u00edsticas distintivas deste design incluem a interoperabilidade de componentes e a prontid\u00e3o para integra\u00e7\u00e3o. Como resultado, as organiza\u00e7\u00f5es devem priorizar a camada de conex\u00e3o, o fluxo cont\u00ednuo de dados e a entrega automatizada de insights \u00e0s interfaces front-end rec\u00e9m-conectadas.<\/p>\n\n\n\n \u00c0 medida que os dados s\u00e3o amplamente executados, o design da malha de dados pode contribuir para a seguran\u00e7a, a governan\u00e7a em tempo real e a conformidade regulat\u00f3ria. Os dados n\u00e3o est\u00e3o dispersos por v\u00e1rios sistemas, reduzindo assim as chances de exposi\u00e7\u00e3o de dados confidenciais.<\/p>\n\n\n\n Antes de o implementar, \u00e9 crucial compreender as regulamenta\u00e7\u00f5es e os requisitos regulat\u00f3rios que se aplicam aos seus dados. Diferentes tipos de dados podem estar sujeitos a quadros regulamentares e legisla\u00e7\u00e3o. Pode lidar com isso implementando procedimentos de conformidade automatizados que garantem que as transforma\u00e7\u00f5es de dados ocorram conforme necess\u00e1rio para cumprir os requisitos legais.<\/p>\n\n\n\n Ao usar gr\u00e1ficos de conhecimento para representar metadados e rela\u00e7\u00f5es de dados, a an\u00e1lise gr\u00e1fica oferece uma abordagem mais inteligente do que as bases de dados relacionais. Em vez de se basear apenas em strings de texto, acrescenta um contexto sem\u00e2ntico aos dados para compreender o significado da informa\u00e7\u00e3o.<\/p>\n\n\n\n Um gr\u00e1fico de conhecimento pode fornecer insights operacionais e empresariais, examinando as liga\u00e7\u00f5es entre fontes de dados. Comparado com o m\u00e9todo tradicional de bases de dados relacionais, \u00e9 mais eficaz na integra\u00e7\u00e3o de dados diversos, e os insights descobertos s\u00e3o mais valiosos para os utilizadores empresariais. Dado que o objetivo principal desta arquitetura integrada \u00e9 permitir o uso abrangente de v\u00e1rias fontes de dados sem duplica\u00e7\u00e3o, os gr\u00e1ficos de conhecimento alimentados pela an\u00e1lise gr\u00e1fica s\u00e3o ideais para ambientes de dados complexos..<\/p>\n\n\n\n LEIA TAMB\u00c9M:<\/strong> Para que serve o instituto nacional de estat\u00edstica?<\/a><\/p>\n\n\n\n Normalmente, esta arquitetura integrada ir\u00e1 produzir e transmitir insights diretamente para aplica\u00e7\u00f5es de neg\u00f3cios ou criar reposit\u00f3rios de dados fragmentados para an\u00e1lise pela equipa de TI ou pela equipa de dados. Um mercado de dados que democratize o acesso para programadores cidad\u00e3os \u00e9 outra forma de aproveitar ao m\u00e1ximo o potencial dos dados.<\/p>\n\n\n\n Os dados deste mercado podem ser usados para desenvolver novos modelos para casos de uso emergentes por utilizadores empresariais com conhecimentos b\u00e1sicos de an\u00e1lise de dados<\/a> e anos de experi\u00eancia em an\u00e1lise de neg\u00f3cios. As empresas podem permitir que os programadores cidad\u00e3os o utilizem de forma inovadora e flex\u00edvel, al\u00e9m de desenvolverem BI espec\u00edfico para cada caso de uso.<\/p>\n\n\n\n Ao criar um data fabric, a tecnologia de c\u00f3digo aberto pode ser um elemento fundamental. Por ser extens\u00edvel e pronto para integra\u00e7\u00e3o, as tecnologias de c\u00f3digo aberto s\u00e3o ideais para a sua arquitetura.<\/p>\n\n\n\n Como pode envolver um investimento significativo, e deseja proteger esse investimento mesmo que, mais tarde, decida mudar de fornecedor, os componentes de c\u00f3digo aberto tamb\u00e9m podem ajudar a reduzir a depend\u00eancia de um \u00fanico fornecedor. N\u00e3o deixe de verificar o projeto Open Data Fabric, recentemente lan\u00e7ado, que permite um pipeline de processamento de dados de streaming descentralizado usando big data e blockchain.<\/p>\n\n\n\n Uma fun\u00e7\u00e3o essencial na sua solu\u00e7\u00e3o de malha de dados \u00e9 a capacidade de gerar automaticamente c\u00f3digo nativo que pode ser usado para integra\u00e7\u00e3o. \u00c9 poss\u00edvel gerar c\u00f3digo otimizado nativamente em v\u00e1rias linguagens diferentes, incluindo Spark, SQL e Java, mesmo enquanto se analisam os dados recebidos.<\/p>\n\n\n\n Os profissionais de TI podem, ent\u00e3o, utilizar este c\u00f3digo para integrar novos sistemas para os quais APIs e SDKs ainda n\u00e3o estejam dispon\u00edveis. Este m\u00e9todo permite incorporar novos sistemas de dados de forma r\u00e1pida e f\u00e1cil, sem preocupa\u00e7\u00f5es com altos custos de integra\u00e7\u00e3o ou investimentos significativos. Tamb\u00e9m acelera a sua transforma\u00e7\u00e3o digital. \u00c9 importante notar que a gera\u00e7\u00e3o de c\u00f3digo nativo deve funcionar com conectores prontos para facilitar a sua utiliza\u00e7\u00e3o.<\/p>\n\n\n\n As empresas podem otimizar a utiliza\u00e7\u00e3o dos seus dispositivos IoT adaptando a malha de dados para a computa\u00e7\u00e3o de borda. A malha de dados de borda, frequentemente chamada de malha de dados de borda para a nuvem, foi especificamente concebida para auxiliar nas implementa\u00e7\u00f5es de IoT. Ela transfere tarefas importantes relacionadas aos dados do aplicativo centralizado para uma camada de borda distribu\u00edda, mas intimamente ligada.<\/p>\n\n\n\n Por exemplo, uma f\u00e1brica inteligente pode utilizar uma malha de dados de borda para determinar automaticamente o peso de um contentor de carga (sem necessidade de contacto com a nuvem centralizada) e iniciar a sele\u00e7\u00e3o de procedimentos. Isso facilita a\u00e7\u00f5es autom\u00e1ticas e agiliza a tomada de decis\u00f5es que n\u00e3o seriam vi\u00e1veis com um paradigma convencional e centralizado de reposit\u00f3rio de dados.<\/p>\n\n\n\n
\n\n\n\nO que \u00e9 Data Fabric?<\/h2>\n\n\n\n
\n
\n\n\n\nImport\u00e2ncia do Data Fabric<\/h2>\n\n\n\n
<\/figure>\n\n\n\n
\n\n\n\nDicas e Pr\u00e1ticas Recomendadas<\/h2>\n\n\n\n
1- Utilize um modelo de processo DataOps. <\/h3>\n\n\n\n
2- Evite criar mais um data lake. <\/h3>\n\n\n\n
3- Reconhe\u00e7a as suas obriga\u00e7\u00f5es regulat\u00f3rias e de conformidade. <\/h3>\n\n\n\n
4- Utilize an\u00e1lise gr\u00e1fica para procurar interconex\u00f5es.<\/h3>\n\n\n\n
5- Crie um mercado de dados para os programadores cidad\u00e3os. <\/h3>\n\n\n\n
6- Utilize tecnologia de c\u00f3digo aberto. <\/h3>\n\n\n\n
7- Habilite a produ\u00e7\u00e3o de c\u00f3digo nativo.<\/h3>\n\n\n\n
8- Aprimore o data fabric para a computa\u00e7\u00e3o de borda. <\/h3>\n\n\n\n