sexta-feira, 23 de maio de 2014

IDG Now!: Big Data deve ser visto com atenção


Tenho participado de vários eventos sobre o tema Big Data e ainda observo que existe muita curiosidade e pouca ação. Curiosamente, vejo que o desconhecimento do conceito de Big Data continua elevado.

Este desconhecimento pode explicar, pelo menos em parte, o resultado de uma recente pesquisa feita pela Information Difference (http://www.informationdifference.com/), que perguntou a CIOs de diversas empresas o status das suas ações de Big data. Entre os entrevistados, 30% responderam que ainda não tinham planos para tal e 37% disseram que iniciariam provas de conceito ainda este ano ou no ano que vem. Apenas 32% disseram que estavam com projetos em atividade. Ou seja, grosso modo, 1/3 está fazendo alguma coisa, 1/3 está pensando e 1/3 ainda nem começou a pensar no assunto…

Mas, quando se fala em grandes volumes de dados – o primeiro V do conceito de Big Data - não se fala em algo novo. Em ciências como astronomia, climatologia e física, ou mesmo na indústria cinematográfica, há muitos anos se lida com imensos volumes de dados. O CERN, por exemplo, gera 35 petabytes de dados por ano (https://gigaom.com/2013/09/18/attacking-cerns-big-data-problem/). Aliás, o conceito de Big em volume de dados é bem relativo. No inicio dos anos 2000, falar em terabyte era espantoso. Hoje, um serviço como o Google Drive oferece um terabyte por cerca de 10 dólares.

A evolução da geração de dados na sociedade digital vem acontecendo de forma muito rápida. No ano 2000 apenas 25% dos dados estavam em formato digital. Hoje mais de 98% de todos os dados gerados no mundo estão em formato digital. Ano que vem deveremos gerar cerca de oito zetabytes e em 2020 cerca de 44 zetabytes (44 trilhões de gigabytes). Vale a pena dar uma olhada na pesquisa “Digital Universe” do IDC em http://www.emc.com/leadership/digital-universe/index.htm.

Este volume de dados é gerado por diversas fontes, como mídias sociais (a cada minuto o Facebook gera 350 GB de dados e são criados 278.000 tuites), smartphones, sensores, sistemas nas empresas, planilhas em nuvem, etc. Os objetos geram cada vez mais dados. A indústria automotiva estima que em 2020 os carros conectados gerarão cerca de 11 petabytes. Veja o estudo da CAR – Center for Automotive Research em http://www.cargroup.org/?module=Publications&event=View&pubID=107. Este é o segundo V do conceito: variedade. Os dados são gerados por diversas fontes, e na sua imensa maioria não estão estruturados ou seja não são formatados por bancos de dados tradicionais como os do modelo relacional.

Claro que nem todos os dados gerados são úteis. Em 2013, cerca de 20% dos dados gerados podiam ser considerados válidos para análise, percentual que deve crescer para 35% em 2020. Hoje menos de 5% são realmente analisados. Este ponto nos chama atenção para o terceiro V do conceito, que é veracidade. Do turbilhão de dados, temos que extrair o que realmente nos interessa e nos agrega valor.

Em muitas aplicações a velocidade com que os dados são processados, analisados, e ações e decisões são tomadas é essencial. Com o tempo o valor de muitos dados decresce sensivelmente. Por exemplo, tuites tem mais significado no momento em que acontecem, permitindo entender determinadas tendências em tempo real. Sensores de fluxo de veículos tem significado se analisados em tempo real de modo a impedirem a ocorrência de congestionamentos. Este é o quarto V: velocidade.

E podemos considerar que o vetor resultante da aplicação dos conceitos de Big Data é o valor para os negócios. O quinto V!

Na prática nem todas os V têm a mesma importância para determinada empresa ou aplicação.

Big Data deve ser visto com atenção. Sinaliza o inicio de uma grande transformação na sociedade. Uma sociedade data-driven será bem diferente da que conhecemos hoje. Como o telescópio nos permitiu compreender o universo e o microscópio nos abriu um mundo novo e até então desconhecido dos germes, o Big Data vai nos abrir uma nova maneira de sentir o mundo à nossa volta. Sairemos de modelos mentais baseados na escassez de dados (coletar dados era uma tarefa difícil quando a maior parte dos dados não estavam em formato digital, como no ano 2000), para abundância de dados. O Google, por exemplo, processa mais de 24 petabytes de dados por dia e a cada minuto o 1,2 bilhão de usuários do Facebook clicam no botão Like mais de 1,8 milhões de vezes, o que faz com que estas empresas conheçam mais de nós que nós mesmos…

O impacto disso é de difícil visualização. E será bem mais impactante que a invenção da prensa, que mudou o nosso mundo. De 1453 a 1503, cerca de oito milhões de livros foram publicados, que foi uma produção de conteúdo maior que toda a sociedade havia gerado via escribas nos 1200 anos anteriores. Em 2010, Eric Schmidt, então CEO do Google afirmava que em dois dias a sociedade já gerava tantos dados desde seus primórdios até 2003. Imaginemos nos próximos anos, com a geração de dados sendo duplicados a cada dois anos.

Big Data nos abre o que podemos chamar de portas para uma “intelligent economy” ou economia inteligente que produz um fluxo continuo de informações, que podem ser monitoradas e analisadas.

Ainda é um cenário imaturo, como as pesquisas mostram, e existem poucos exemplos de “melhores práticas”. Portanto é uma iniciativa inovadora para maioria das empresas, com os riscos e claro, as recompensas dos empreendedores inovadores. Mas ficar parado esperando a onda chegar será perigoso, pois, provavelmente até o fim da década, Big Data passará ser apenas “Just Data”. Será o modelo natural de pensar análises de dados. Neste momento

Big Data se tornará ubíquo nas empresas e o termo Big deixará de fazer sentido. Aí será a hora de contar os vencedores e os derrotados…

Fonte: "Big Data deve ser visto com atenção." IDG Now!. http://idgnow.com.br/blog/tecnologia/2014/05/23/big-data-deve-ser-visto-com-atencao/ (accessed May 23, 2014).

Nenhum comentário:

Postar um comentário

deixe aqui seu comentário