Os processos da empresa necessitam urgentemente da capacidade de acessar facilmente arquivos em qualquer lugar, independentemente de sua localização física, algo que os usuários de iPhone e Android desfrutam há muito tempo.
O constante aumento de dados, especialmente os não estruturados, tem sido um desafio enfrentado pelas empresas por muitos anos. As equipes de TI estão em uma luta contínua para equilibrar a acessibilidade dos dados para os usuários com a proteção global e conformidade com políticas de governança de dados. Além disso, é necessário garantir que os arquivos sejam armazenados da forma mais econômica possível, independentemente do tipo de armazenamento mais adequado no momento.
O desafio reside na inexistência de uma solução de armazenamento universal que possa servir como o local centralizado para todos os dados de uma empresa, especialmente quando distribuídos em diferentes locais. Em vez disso, há diversas opções de armazenamento disponíveis de vários fornecedores, cada uma mais adequada para requisitos específicos de desempenho, protocolo de acesso e custo em diferentes fases do ciclo de vida dos dados. Os usuários e aplicativos buscam acesso confiável e contínuo aos seus arquivos, no entanto, as políticas de dados frequentemente exigem a transferência de arquivos para diferentes plataformas de armazenamento ou locais ao longo do tempo. Isso acarreta em custos adicionais e complexidade para o setor de TI, além de interromper os fluxos de trabalho dos usuários.
O aumento no uso de inteligência artificial e machine learning resultou em uma grande quantidade de dados que continua a crescer, agravando o problema. Além disso, as aplicações de IA necessitam acessar dados antigos para treinar e executar suas tarefas, o que muitas vezes implica em transferir dados de sistemas de armazenamento mais acessíveis para plataformas mais caras e complexas.
No ambiente do consumidor, as pessoas se acostumaram ao fato de que, ao acessarem seu dispositivo iPhone ou Android, conseguem visualizar facilmente seus arquivos, independentemente de onde eles estejam armazenados. Mesmo ao mudar para um novo dispositivo, os arquivos permanecem prontamente acessíveis, mantendo-se visíveis para o usuário, sem que seja necessário se preocupar com a localização física dos arquivos. Essa integração dos dados entre diferentes plataformas ocorre automaticamente em segundo plano, sem interferir na experiência do usuário.
Essa habilidade é fundamental para a empresa, especialmente considerando os grandes volumes de dados e os altos níveis de desempenho necessários. A migração de dados entre plataformas ou locais é complexa e disruptiva para usuários e aplicativos, o que dificulta o processo. Isso gera o que é conhecido como “gravidade dos dados”, onde o custo de copiar os dados para uma plataforma diferente é tão alto que muitas vezes é mais viável mantê-los onde estão. Quando múltiplos sites e a nuvem são adicionados à equação, a situação se torna ainda mais desafiadora.
A importância da automação na coordenação de informações.
As infraestruturas convencionais de tecnologia da informação que armazenam dados não estruturados estão naturalmente isoladas. Os dados são acessados por usuários e aplicativos por meio de sistemas de arquivos, que é a camada de informações sobre os dados armazenados em formatos de arquivos e pastas utilizáveis que vemos em nossos computadores.
Nas arquiteturas tradicionais de TI, os sistemas de arquivos ficam localizados na camada de armazenamento, o que pode dificultar a transferência dos dados para outro fornecedor de armazenamento ou para a nuvem. Isso ocorre porque os dados ficam presos em uma plataforma proprietária do fornecedor de armazenamento, o que requer a criação de novas cópias dos metadados e dos arquivos reais ao realizar essa transferência. Essa multiplicação de cópias de arquivos e a complexidade envolvida no gerenciamento dessas cópias em silos pode prejudicar o acesso do usuário e dificultar a modernização e consolidação dos casos de uso de TI.
Essa situação também influencia a segurança de dados, que pode ficar dividida entre diferentes setores. Além disso, afeta os usuários, que devem continuar conectados e produtivos enquanto são feitas alterações na infraestrutura. Isso também resulta em desperdícios econômicos quando várias cópias repetidas de dados são criadas, ou quando dados inativos são mantidos em sistemas de armazenamento caros, enquanto poderiam ser gerenciados de forma mais eficiente em outro local.
O que se precisa é de uma forma de garantir aos usuários e aplicativos acesso simultâneo a todos os seus dados, que muitas vezes estão divididos em diferentes locais de armazenamento de fornecedores, incluindo em vários sites e provedores de nuvem. Além disso, os administradores de TI devem conseguir automatizar serviços de dados entre plataformas para gerenciamento de fluxo de trabalho, proteção de dados, integração, entre outros, sem causar interrupções aos usuários ou aplicativos.
Manter as operações em várias áreas departamentais interconectadas funcionando com eficiência máxima, ao mesmo tempo em que se atualiza as infraestruturas de TI para acompanhar os novos casos de uso baseados em dados, requer a habilidade de superar as barreiras entre fornecedores e concentrar-se nos resultados.
Reformulando o texto: Explicando o conceito de orquestração de dados.
A orquestração de dados é o procedimento automatizado que assegura que os arquivos estejam disponíveis onde precisam estar, no momento necessário, independentemente da plataforma, localização ou nuvem utilizada. Este processo ocorre em segundo plano e é transparente para os usuários e aplicativos. Durante o processamento ativo dos dados, é possível que sejam armazenados em locais de alta performance próximos aos recursos computacionais. No entanto, após a conclusão do processamento, esses dados devem ser transferidos para armazenamento de baixo custo, nuvem ou outro destino, sem interromper o acesso dos usuários ou aplicativos.
A orquestração de dados difere dos métodos convencionais de transferência de cópias de dados entre diferentes sistemas, locais e plataformas, porque é uma operação em segundo plano que não é percebida pelos usuários e aplicativos. Do ponto de vista do usuário, os dados parecem não ter sido movidos, permanecendo na mesma estrutura de arquivos e pastas em seu desktop, em um ambiente global de múltiplas plataformas. A localização real dos arquivos é determinada pelas necessidades do fluxo de trabalho, podendo ser alterada conforme as demandas dos processos de trabalho.
A coordenação eficaz de dados neutros de fornecedores garante que a movimentação de arquivos não afete o acesso do usuário ou altere a estrutura de arquivos global. Isso é válido tanto para a transferência de arquivos entre diferentes locais em um data center único, quanto entre vários data centers ou na nuvem. Um sistema automatizado de orquestração de dados garante que as operações de movimentação de dados não causem impacto nos usuários, mesmo quando os dados estão sendo utilizados ativamente.
Preparar um ambiente global para dados.
Em vez de simplesmente mover dados de um lugar para outro, o Hammerspace oferece uma solução de armazenamento e organização de dados baseada em software, que permite acesso unificado através de um sistema de arquivos global de alto desempenho. Essa solução pode abranger diferentes tipos de armazenamento de vários fornecedores, em diferentes locais geográficos, incluindo nuvens públicas e privadas. Como uma solução neutra e baseada em software, o Hammerspace conecta silos de dados em diferentes locais, criando assim um ambiente global de dados multiplataforma.
Neste ambiente de dados global, é possível aumentar ou reduzir dinamicamente a capacidade para lidar com picos de trabalho em sites na nuvem ou remotos. Isso é feito enquanto garante acesso contínuo e seguro a arquivos globais para usuários e aplicativos, sem depender de soluções específicas de fornecedores para mover dados entre diferentes locais. O Hammerspace utiliza uma variedade de metadados, incluindo metadados personalizados definidos por fluxo de trabalho, para automatizar serviços de dados em várias plataformas, como políticas de armazenamento e proteção de dados. Isso inclui recursos como registros de auditoria global, recuperação de arquivos apagados, versionamento, recuperação de desastres, armazenamento WORM (escrever uma vez, ler muitas) e muito mais.
Todos os tipos de armazenamento e localizações permitem a automação global dos serviços de dados, que podem ser invocados sem interromper o usuário, mesmo durante a utilização de dados ao vivo.
O Hammerspace integra automaticamente os metadados dos arquivos de dados locais, eliminando a necessidade de migrar os dados de armazenamento atuais. Dessa forma, em questão de minutos, os usuários e aplicativos podem acessar um sistema de arquivos global em ambientes de grande escala, utilizando os protocolos de arquivos SMB e NFS padrão da indústria para todos os seus dados, independentemente do tipo ou local de armazenamento. Não é necessário nenhum software adicional para que os usuários ou aplicativos acessem diretamente seus arquivos, mantendo as visualizações do sistema de arquivos como estão acostumados.
O desfecho é que as informações sobre os arquivos são compartilhadas entre todos os usuários, aplicativos e locais em um sistema global de nomes, ao invés de ficarem restritas a níveis específicos de infraestrutura em ambientes isolados de fornecedores exclusivos. A separação entre plataformas de armazenamento e locais distintos é eliminada.
A influência dos metadados em escala mundial.
Nos sistemas de armazenamento convencionais, os usuários não têm conhecimento ou controle sobre em qual disco individual dentro do sistema estão armazenados seus arquivos, nem se podem ser movidos posteriormente. A manipulação dos dados brutos entre discos e unidades em um sistema de armazenamento é realizada de forma transparente para os usuários, uma vez que eles interagem com os metadados do sistema de arquivos, que operam em um nível acima do hardware.
Da mesma maneira, ao acessarem seus arquivos por meio do sistema de arquivos Hammerspace, os usuários percebem o movimento de dados entre diferentes locais e silos de armazenamento de forma transparente, assim como a transferência de bits entre unidades e discos em seus arrays de armazenamento. Os arquivos e pastas estão exatamente onde esperam encontrá-los em seus computadores, pois sua visualização desses arquivos é baseada nos metadados globais do sistema de arquivos acima do nível da infraestrutura. Os dados podem permanecer no armazenamento atual ou ser transferidos para um novo local ou para a nuvem de maneira transparente. Para os usuários, o sistema de arquivos permanece o mesmo, em um namespace global unificado, sem interferir em seus processos de trabalho.
É como se todos os arquivos de diferentes tipos de armazenamento e locais fossem reunidos em um único sistema de armazenamento local (NAS), com acesso unificado de qualquer lugar, seguindo padrões estabelecidos.
Para as empresas de tecnologia da informação, essa novidade oferece diversas oportunidades, possibilitando o gerenciamento centralizado dos dados em diferentes tipos de armazenamento e locais sem prejudicar o acesso dos usuários. Adicionalmente, permite controlar esses recursos de armazenamento e automatizar os serviços de dados em escala global através de uma única interface. É nesse ponto que começamos a perceber a importância dos metadados globais.
Em outras palavras, os gestores de tecnologia da informação agora têm a possibilidade de utilizar diferentes tipos de metadados para automatizar serviços essenciais de dados em escala global, mesmo em sistemas de fornecedores diferentes e incompatíveis. Esse processo pode ser realizado de forma discreta, sem a necessidade de soluções exclusivas ou interrupções para os usuários.
Por meio das ferramentas de automação do Hammerspace, os administradores podem estabelecer antecipadamente diversas regras sobre como as diferentes categorias de dados devem ser administradas, localizadas e protegidas em toda a empresa. Essas diretrizes podem ser aplicadas individualmente a cada arquivo, utilizando metadados que oferecem insights sobre a natureza dos dados e sua importância para a organização.
Isso quer dizer que é possível aprimorar os serviços de dados para se adequar às diretrizes empresariais. Isso engloba serviços como a integração entre diferentes sistemas de armazenamento, locais físicos e a computação em nuvem, a transferência de dados e outras tarefas de organização de dados, a movimentação de dados entre diferentes tipos de armazenamento e locais para automatizar processos, a expansão da infraestrutura local para a nuvem, a realização de backups globais, a implementação de procedimentos globais de recuperação de desastres e muito mais. Agora, tudo isso pode ser automatizado em escala global sem causar interrupções para os usuários.
Em locais onde os processos de IA e aprendizado de máquina possibilitam que as empresas encontrem novas maneiras de aproveitar seus dados atuais, a importância de automatizar a coordenação para treinar e realizar inferências a partir desses dados em diferentes silos sem a necessidade de criar novos bancos de dados agregados torna-se ainda mais evidente.
Essa eficaz estratégia baseada em dados simplifica a gestão de dados armazenados de forma fragmentada, o que pode resultar em uma redução significativa da complexidade para a equipe de TI, diminuindo os custos operacionais e aumentando a eficiência no uso do armazenamento. Isso possibilita aos clientes otimizarem o uso de seu armazenamento atual e adiarem a necessidade de adquirir mais espaço de armazenamento.
As empresas que lidam com um ambiente de dados fragmentado, disperso e ineficaz não precisam mais se preocupar. Agora é o momento de exigir maior desempenho de suas estruturas de dados, por meio da automação na orquestração dos dados.
Trond Myklebust, cofundador e CTO do Hammerspace, é reconhecido por sua contribuição como mantenedor e principal desenvolvedor do cliente NFS do kernel do Linux. Ele desempenhou um papel crucial na arquitetura e desenvolvimento de sistemas de arquivos em rede ao longo de várias gerações. Antes de ingressar no Hammerspace, Trond acumulou experiência trabalhando na NetApp e na Universidade de Oslo. Sua formação inclui um mestrado em teoria quântica de campo e campos fundamentais pelo Imperial College, em Londres, e ele também possui experiência em física de alta energia pela Universidade de Oslo e CERN.
Lo siento, necesito que proporciones un texto específico para poder parafrasearlo. ¿Puedes proporcionarme más información o un fragmento del texto que quieres que parafrasee?
O New Tech Forum fornece um espaço para líderes de tecnologia, bem como fornecedores e outros colaboradores externos, para examinar e debater de forma abrangente e aprofundada a tecnologia empresarial emergente. A seleção é feita com base em nossa escolha das tecnologias que consideramos importantes e de maior interesse para os leitores do InfoWorld. A InfoWorld não garante a publicação de conteúdos com intuitos de marketing e reserva o direito de editar todas as contribuições. Qualquer dúvida pode ser enviada para doug_dineley@foundryco.com.