Big Data

OVH cloud Big Data

Valorize os seus dados graças ao big data

Os dados são cada vez mais importantes nos dias de hoje e as utilizações multiplicam-se, o que amplifica o volume de informações que precisa de ser tratado. Segundo o estudo da IDC “Data Age 2025”, publicado em 2017, a dataesfera (o volume total de dados armazenados nos sistemas informáticos) será multiplicada por cinco até 2025. Isto equivale a 34 TB por pessoa!

Desde a criptomoeda no setor bancário até ao big data na área da saúde, passando pelo machine learning no comércio, pela robótica e a IoT na indústria e os veículos autónomos no transporte, os dados estão a transformar o mundo. São o motor da transformação digital de todos os setores económicos. 

Data overview

Visão geral dos dados no mundo de hoje

No dia de amanhã, todas as empresas deverão lidar com novos cenários que começámos apenas agora a imaginar. Ninguém pode ficar de fora, tendo em conta o risco de ser ultrapassado por uma concorrência mais produtiva, já com novas formas de utilizar os dados, com melhores conhecimentos do mercado e com novos serviços disponíveis e mais adaptados às necessidades dos clientes. É simplesmente uma questão de inovar ou desaparecer.

Inovar ou desaparecer

Inovar ou desaparecer

Ao mesmo tempo que mudam o mundo, estes dados transformam e evoluem sem parar. O seu volume aumenta e estes dados tornam-se mais complexos: imagens, sons, publicações nas redes sociais, cartografia, medições de sensores, dados de satélite... O armazenamento e o tratamento de todas estas informações heterógenas e não estruturadas constituem um verdadeiro desafio.

Os dados, um ativo essencial para as empresas

Sem desafios, não há revoluções. É necessária uma problemática para poder oferecer uma solução inovadora, que representa uma mudança de paradigma. Mas não há revoluções sem riscos. O aumento do volume e da complexidade dos dados representam novas ameaças para as organizações.

Tornando-se críticos para os modelos empresariais, a sua perda pode afetar significativamente a continuidade da atividade das empresas. Além disso, em alguns setores onde a segurança é primordial, como a banca e a saúde, o incumprimento da conformidade pode implicar multas e indemnizações de vários milhões de euros.

Por outro lado, o controlo desses riscos origina sempre um aumento dos custos a nível das infraestruturas e dos recursos humanos. Despesas essas que nem todas as organizações estão dispostas a ter.

Para enfrentar estas problemáticas, a maioria das empresas procuraram uma nova abordagem recorrendo à cloud.

A adoção da cloud

As características da cloud permitem responder aos desafios criados pelo crescimento exponencial e a diversificação dos dados. Permitem atenuar as dificuldades relativas à criação de infraestruturas capazes de alojar grandes volumes de informações, apoiar o seu crescimento e suportar os pré-requisitos das novas tecnologias associadas.

Perante estes desafios, torna-se inconcebível solucioná-los através de um implementação “on-premises” tradicional. Além disso, na cloud, os tempos de implementação são consideravelmente mais baixos consoante a empresa de alojamento.

Começar com o Public Cloud

Uma empresa de alojamento à altura do desafio

Mas os serviços cloud não são todos iguais. Apenas uma cloud “smart” pode ajudar as empresas a voltar a controlar os seus dados, de forma a poderem inovar e empreender livremente. A nossa cloud é Simples e rápida de criar; é Multilocal, próxima de todos em todo o mundo; tem um preço Acessível e previsível; é Reversível, aberta e interoperável; e é Transparente e responsável. Temos a convicção de que uma cloud “smart” como a nossa é necessária para que a revolução dos dados seja um progresso para todos.

Além disso, qualquer projeto de um determinado tamanho deverá enfrentar três principais desafios que nem todos os fornecedores de serviços cloud estão preparados para superar: inteligência, volume e segurança.

Intelligence

Inteligência

Parece existir um consenso geral de que o big data e a inteligência artificial formam um dos principais pilares do desenvolvimento de uma empresa. Graças aos dados, as empresas têm consciência de que podem adquirir os conhecimentos necessários para melhor compreender o contexto económico-social no qual atuam e tomar a decisão certa no momento mais apropriado. Graças a esses dados, as empresas já podem construir novos serviços com base no machine learning ou no deep learning. De facto, praticamente todos os quadros afirmam que a sua empresa investe neste tipo de iniciativa.

Face à necessidade de assegurar que os sistemas de uma empresa são capazes de gerir a complexidade da inteligência artificial e da aprendizagem cognitiva, a OVH oferece soluções para acelerar estas iniciativas em todo o percurso do dado. Assim, simplifica-lhe o caminho para o big data e a inteligência artificial. Estes serviços estão disponíveis à hora ou mensalmente e, para uma maior facilidade, podem ser geridos.

Volume

Volume

A execução de tarefas de análise preditiva (para otimizar as operações, o desenvolvimento de novos produtos e serviços de valor acrescentado, assim como o cumprimento de regulamentações cada vez mais rigorosas) vai obrigar as empresas a gerir grande volumes de dados. Para poder armazenar todas as informações que alimentam os sistemas de inteligência artificial e tratá-las rapidamente, é necessário possuir infraestruturas apropriadas.

 

Enquanto fornecedor de serviços cloud nativo, as nossas soluções permitem armazenar e tratar grandes volumes de dados de forma segura, escalável e reversível.

Em muito pouco tempo, poderá obter uma infraestrutura de produção com componentes de hardware de última geração e uma disponibilidade garantida. Os nossos serviços, alojados nos nossos próprios datacenters distribuídos por quatro continentes, podem ser interligados através de uma rede dedicada para acompanhar facilmente o crescimento dos dados. Além disso, os serviços da OVH baseiam-se em padrões do mercado ou em soluções open source para que possa complementar os nossos produtos com os de outra empresa de alojamento a qualquer momento, ou até mesmo mudar de fornecedor. Queremos que os nossos clientes sejam livres para sair se assim o desejarem.

Security

Segurança

Tal como referido anteriormente, a segurança dos dados representa um outro desafio importante. Ao longo dos últimos meses, registaram-se vários recordes na intensidade dos ataques de negação de serviço (DDoS) e foram divulgados vários casos de falhas de segurança. Não é por acaso que um dos maiores medos das empresas em termos de segurança é ser alvo de um ataque informático.

Com a generalização da IoT, os sensores e outros wearables são suscetíveis de recolher dados pessoais e constituem um novo foco de vulnerabilidades. As empresas que recolhem estas informações devem assegurar a sua integridade, de forma a proteger a vida privada dos utilizadores e respeitar a regulamentação em vigor.

Na OVH, sabemos que a segurança e a proteção dos dados é essencial. Todos os nossos serviços incluem a nossa proteção anti-DDoS por predefinição.

Todos os nossos produtos oferecem uma alta disponibilidade, que asseguramos graças à redundância e às certificações de conformidade com as normas mais exigentes. Os nossos datacenters estão ligados através da nossa própria rede mundial dedicada de 18 Tbps.

EU flag

Além disso, enquanto empresa europeia, estamos sujeitos a uma regulamentação muito rigorosa em matéria de proteção de dados. Com a expansão para a América do Norte, criámos um isolamento jurídico para que os nossos serviços fora dos Estados unidos não fiquem sujeitos nem ao “Patriot Act” nem ao “CLOUD Act”. O nosso alto compromisso com a soberania dos dados é uma das razões pelas quais a OVH foi escolhida como fornecedor oficial da iniciativa IA4EU (Inteligência Artificial para a União Europeia), que tem como objetivo promover uma visão europeia da inteligência artificial, baseada em valores éticos.

Além disso, ao contrário daquilo que pode parecer à primeira vista, a segurança não é só uma questão técnica. Na prática, o aspeto financeiro é, muitas vezes, o principal obstáculo para implementar medidas de segurança apropriadas. Criar infraestruturas seguras sempre disponíveis e com uma proteção de dados garantida implica um custo que pode aumentar de forma exponencial, ou até mesmo ser totalmente imprevisível.

Na OVH, o utilizador controla os próprios custos. Oferecemos preços transparentes e acessíveis para garantir que tenha sempre um orçamento certo para um plano de continuidade de negócios. Os nossos serviços cloud não têm qualquer período de fidelização e, consoante a solução, pode optar por uma faturação regular ou a pedido, na modalidade do pagamento conforme a sua utilização.

As soluções da OVH ao serviço da sua estratégia de dados

É com grande orgulho que a OVH participa no desenvolvimento de múltiplas empresas em todo o mundo, acompanhando-as nos seus projetos em torno dos dados de A a Z. A nossa oferta abrange todo o percurso das informações, desde a recolha até ao armazenamento e à análise, passando pela realização de previsões definidas através da aprendizagem automática.

Infographie story data

 

O nosso lab gratuito OVH Data Collector, um potente coletor baseado na cloud da OVH, permite-lhe recolher facilmente dados, replicá-los, consultá-los e transportá-los para alimentar a sua aplicação.

Para armazenar dados, a OVH disponibiliza várias soluções que respondem a todas as suas necessidades, desde o bare metal até às plataformas geridas chave na mão: servidores dedicados especialmente concebidos para o armazenamento de grandes quantidades de informações, como os novos Advance STOR; o armazenamento centralizado NAS-HA; as soluções de armazenamento escaláveis como o Object Storage ou Block Storage, baseadas nas tecnologias OpenStack Swift e Ceph, respetivamente; Logs Data Platform e Metrics Data Platform para armazenar e analisar logs e métricas de forma praticamente ilimitada; ou ainda o Cloud Databases, uma solução de bases de dados geridas.

Depois de os dados terem sido recolhidos e armazenados num serviço adaptado, sugerimos-lhe duas abordagens diferentes para criar o seu cluster big data. Por um lado, o Data Analytics Platform oferece-lhe a possibilidade de implementar, em menos de uma hora, um cluster de produção Apache Hadoop pronto a ser usado e seguro. Por outro lado, o Managed Cloudera permite-lhe tirar partido da perícia dos nossos parceiros Claranet e Cloudera para dispor de uma solução big data Apache Hadoop totalmente gerida.

Finalmente, para que possa aprender a partir dos seus dados e usufruir ao máximo do potencial da inteligência artificial, a OVH fornece a infraestrutura necessária, com servidores dedicados e instâncias Public Cloud aceleradas por GPU NVIDIA de última geração. Mais recentemente, demos um novo passo oferecendo-lhe todos os softwares necessários. Desta forma, somos o único fornecedor de serviços cloud da Europa a oferecer o catálogo de containers acelerados por NVIDIA GPU Cloud (NGC), que lhe permite instalar, em apenas alguns cliques, aplicações como o TensorFlow ou PyTorch nas suas instâncias. Outros softwares, como o Jupyter ou Dataiku DSS, também podem ser instalados em apenas alguns cliques. Finalmente, pode também testar os nossos “labs” Machine Learning Platform e OVH AI Market Place.

public cloud data ovh

NVIDIA NGC Platform

A OVH e a NVIDIA associaram-se para oferecer a melhor plataforma de aceleração por GPU para o deep learning e o cálculo de alto desempenho.

O NVIDIA GPU Cloud da OVH combina a flexibilidade do Public Cloud e a potência da placa gráfica NVIDIA Tesla V100, de forma a oferecer um catálogo completo de containers acelerados por GPU, podendo ser implementados e mantidos em aplicações de inteligência artificial.

Permite que os utilizadores executem projetos numa plataforma fiável e potente, que respeita a confidencialidade, a reversibilidade e a transparência da localização dos dados.

 

hadoop big data ovh

Data Analytics Platform

Implementar um cluster para big data é um processo moroso e exigente. OData Analytics Platform da OVH facilita-lhe a tarefa: em menos de uma hora, pode usufruir de um stack Apache Hadoop, predefinido e pronto a usar.

Com base num standard de distribuição Hadoop open source, predefinimos todos os serviços necessários para o tratamento dos seus dados e protegemos o tráfego com o mundo exterior, assim como os seus utilizadores.

data collector ovh

Data Collector

Para tirar partido dos seus dados, deve começar por recolhê-los. O Data Collector da OVH permite-lhe integrar informações em tempo recorde, ao mesmo tempo que conserva uma réplica em tempo real de várias fontes, tais como bases de dados ou bus de mensagens. A seguir, poderá colocá-los num cluster para big data (entregamos-lhe um tópico Apache Kafka nativo).

Utilizado desta forma, poderá usufruir de todos os seus dados com um mínimo de impacto na sua infraestrutura de produção.

public cloud machine learning ovh

Machine Learning

Crie, implemente e utilize rapidamente modelos de machine learning, sem ter de se preocupar com a infraestrutura da sua plataforma. Assim, poderá concentrar-se na mais-valia do seu negócio.

Utilizável em linha de comandos ou através de uma interface web, AutoML permite-lhe automatizar todas as tarefas de seleção, de teste e de implementação dos seus modelos de machine learning. As possibilidades são infinitas: deteção de fraude, otimização de processos da cadeia de distribuição, investigação científica... E tudo isto na cloud, com um pagamento em função da sua utilização e com respeito para com os seus dados.

Os dados como motores da inovação

Copernicus program

Tal como já referimos, várias empresas recolhem constantemente dados que devem ser armazenados regularmente nos seus sistemas de TI, garantindo um nível máximo de segurança. Por exemplo, este é o caso da Agência Espacial Europeia (ESA) que, através do seu parceiro Serco, aloja as informações do programa Copernicus no Public Cloud da OVH. Todos os anos, vários petabytes de dados geográficos, térmicos e não estruturados, provenientes da observação da Terra por satélites Sentinel, são constantemente armazenados no nosso Public Cloud. O volume de informações que precisa de ser armazenado está sempre a aumentar, especialmente devido aos satélites cada vez mais recentes e eficientes colocados na órbita.

As aplicações destes dados são infinitas: previsão do estado dos oceanos, controlo da qualidade do ar, desenvolvimento de ferramentas para criar serviços climáticos ou ainda cálculo da rentabilidade da instalação de painéis solares. A partir deste tipo de informações geográficas, a start-up espanhola dotGIS desenvolveu SolarMap. Graças a tecnologias como o big data e o business analytics, esta solução encontra os melhores telhados para instalar painéis solares, dependendo da superfície e das curvas de radiação solar diárias. SolarMap também recebeu o apoio da OVH. Ao participar no Digital Launch Pad da OVH, o nosso programa de inovação para start-ups, conceberam uma arquitetura de cluster de alta disponibilidade com um load balancer, baseada nos servidores dedicados com GPU da OVH. O vRack, a nossa rede privada, permitiu-lhes transferir e entregar rapidamente todo este volume de dados de forma fluida.

Digital map

Mas existem várias aplicações para o big data. Muitas vezes, as empresas utilizam-no para o marketing preditivo. Ao estudar as ações realizadas pelos clientes antes de cancelar um serviço, ou quando deixam de comprar certos produtos, é possível observar padrões de comportamento. O número de acessos ao website, as chamadas para o suporte ou ainda o ritmo de compra são indicadores que, quando correlacionados, podem ajudar a detetar um cliente insatisfeito e a tomar as medidas apropriadas. Por exemplo, na OVH, desenvolvemos uma estratégia deste género internamente, de forma a garantir a satisfação dos nossos clientes.

E este não é o único domínio no qual utilizamos o big data. Através de sensores e sondas, recolhemos dados como a temperatura das salas de datacenter, o número de kWh em cada tomada elétrica, a presença nos escritórios, entre outros. Ao correlacionar estes dados com informações de outras fontes, como as condições meteorológicas ou os preços dos fornecedores, é possível determinar rapidamente qual o elemento que consome mais energia. Desta forma, podemos reduzir os custos e diminuir o nosso impacto ambiental.

Estes são apenas alguns exemplos da forma como os nossos clientes utilizam informações para inovar nos diferentes domínios económicos e sociais. No centro desta revolução, trabalhamos arduamente para que os nossos clientes e parceiros possam inovar livremente. E confiam-nos o seu bem mais precioso: os seus dados.

Christophe Mogentale, Technical Director of Elokence

Elokence

“Gerimos um jogo online, que totaliza 4 milhões de partidas por dia e que consome grandes volumes de dados. Antigamente, armazenávamos os resultados de jogos em bases de dados relacionais clássicas. Desde essa altura, passámos para o big data com a OVH e o nosso volume de informações armazenáveis e utilizáveis já não é limitado. As soluções prontas a usar da OVH Data Analytics Platform também nos permitiu poupar tempo ao implementar um cluster de big data originalmente protegido. Agora, podemos utilizar todos os nossos dados de forma eficiente e sem limites.”

Christophe Mogentale, Technical Director da Elokence