Adoção do Hadoop realmente vale a pena?

Contente

Fatos e números revelam Hadoops que contrastam a natureza
O que esses achados significam?
Conclusão
Sem erros, sem estresse - seu guia passo a passo para criar software que muda vidas sem destruir sua vida

Fonte: Leerodney Avison / Dreamstime.com

Leve embora:

Muitas empresas consideram o Hadoop muito difícil de usar, sem nunca dar uma chance.

Atualmente, muitas pessoas parecem estar mal informadas sobre o Hadoop, principalmente devido a muitas meias-verdades que estão flutuando no mercado. Diz-se que o Hadoop é uma das melhores ferramentas para processamento e gerenciamento de grandes dados, devido à sua alta eficácia e capacidade. Conhecimento é poder e, portanto, chegou a hora de desmascarar esses mitos e analisar os fatos reais por trás deles. É hora de todas essas empresas olharem para a verdade, que pode ser vista no retorno do investimento (ROI).

Em maio de 2015, o Gartner realizou uma pesquisa no Hadoop que revelou muitos resultados surpreendentes. Ele mostrou que muitas empresas não estão usando no momento e não planejam usar o Hadoop, pois consideram extremamente difícil o uso ou não possuem operadores suficientes que possam trabalhar com o Hadoop. Existem muitas outras razões também. No entanto, nem todos se opõem a isso; muitas pessoas estão muito esperançosas com as perspectivas futuras do Hadoop. A escolha de usar ou não o Hadoop pode ser confusa, pois muitas pessoas realmente não entendem a verdade sobre o Hadoop e, portanto, não conseguem distinguir os fatos da ficção.

Fatos e números revelam Hadoops que contrastam a natureza

Geralmente, existem dois tipos de empresas no caso do uso do Hadoop. O primeiro é o tipo relutante, que não tem certeza sobre o uso do Hadoop devido a vários motivos. O segundo tipo consiste nas empresas e negócios que realmente confiam no uso do Hadoop, pois acreditam que isso lhes dará o ROI máximo. Para fornecer mais dados para analisar melhor, é apresentada abaixo uma versão abreviada das conclusões da pesquisa da Gartner de maio de 2015. O grande público-alvo da pesquisa consistiu principalmente de pequenas e médias empresas e pequenos executivos de nível C.

Cerca de 54% do público-alvo se recusou a investir no Hadoop no futuro.
Apenas 18% do público-alvo afirmou que eles podem usar o Hadoop no futuro.
Cerca de 26% do público-alvo está usando ou apenas começou a usar o Hadoop.
As empresas que não o usavam na época e não planejavam usá-lo no futuro apontaram sua interface de usuário difícil de entender e a falta de pessoal qualificado para operá-lo como as principais causas.

Merv Adrian, vice-presidente da Gartner, afirmou que aparentemente o Hadoop não seria muito bem-sucedido pelos próximos dois anos, pois há um grande número de empresas no mundo que não estão usando o Hadoop no momento e não use-o por algum tempo no futuro também. Além disso, a falta de interesse no Hadoop, apesar da crescente necessidade de software de gerenciamento de big data, sugere que a demanda pelo Hadoop tem sido lenta. As razões para isso são:

Não há habilidade suficiente para operar o Hadoop é uma das maiores razões. Pode-se dizer que o Hadoop é usado por pouquíssimas empresas que conseguem usá-lo com eficiência. Algumas ferramentas extras de terceiros estão surgindo no mercado para simplificar o processo, mas mesmo essas não podem simplificar o processo.
O Hadoop requer novas habilidades para usar, e treinar funcionários exige tempo e dinheiro. Além disso, habilidades pré-existentes ou lógica simples não podem ser usadas para operar este software complexo. O treinamento pode ser fornecido, mas espera-se que esses programas ganhem mais importância somente em dois a três anos.
Muitas empresas pensam que o Hadoop não será muito útil. Eles parecem pensar no Hadoop como mais um problema do que uma solução. Eles acham que é muito poderoso, mas não precisam de tanto poder. Além disso, o capital geral necessário para adotar o Hadoop é muito maior que o lucro real obtido por ele.

O segundo grupo de empresas está confiante em seu uso no futuro. Algumas empresas começaram a usar o Hadoop para obter a máxima eficiência com benefícios crescentes. O recurso mais poderoso e influente do Hadoop é que ele pode processar grandes quantidades de dados em tempo real com alta precisão, para reduzir drasticamente as chances de enganar. Essas empresas também podem trabalhar com mais eficiência, pois podem analisar cuidadosamente os comentários dos clientes. Eles poderiam receber esse tipo de dados de um grande número de fontes da Internet.

O que esses achados significam?

O Hadoop é considerado uma ferramenta extremamente avançada, e as pessoas pensam que avançado significa difícil de usar. Para usar o Hadoop, é preciso aprendê-lo adequadamente, o que requer grandes investimentos no campo. Mesmo as ferramentas de terceiros disponíveis nem sempre tornam o Hadoop fácil o suficiente para operar. Portanto, o Hadoop precisa ser modificado para se tornar mais amigável como ferramenta de front-end.

A principal coisa que as empresas devem saber é o potencial do Hadoop para o processamento de grandes dados em tempo real. As empresas que realizam isso obtêm grandes lucros, evitando a fraude ao mesmo tempo. O processamento em tempo real é mais útil do que o processamento em lotes, pois isso também permite que você forneça aos clientes melhores produtos de acordo com o feedback deles. O Hadoop também é mais adequado para processar dados importantes em tempo real, em vez de processar tipos de dados invariáveis em lotes.

Conclusão

A falta de interesse pelo Hadoop não significa que não seja útil. Significa simplesmente que muitas empresas ainda não sabem o suficiente. Como tal, essas empresas precisam usar o Hadoop de maneira a atender às suas necessidades para solucionar problemas com eficiência. Pode ser usado para processamento de dados em tempo real, especialmente dados convencionais. Existem muitos outros recursos e usos do Hadoop também, mas eles ainda precisam ser descobertos. No entanto, ele precisa ser adaptado e sua interface com o usuário precisa desesperadamente de uma alteração. Ele precisa ser simplificado para que qualquer pessoa possa usá-lo. Portanto, nesse ritmo de adoção do Hadoop, é justo dizer que ele será adequado para adoção generalizada somente após alguns anos.