目前作为公认的Hadoop它的未来的发展是怎样的?
来源:CPDA数据分析师网 / 作者:数据君 / 时间:2020-07-14
Hadoop的未来以及使用该技术的公司的战略
Hadoop根深蒂固-已在数以千计的组织中部署了Hadoop-但事实证明,有效地使用Hadoop是一个关键的挑战,并且在许多组织中并未获得广泛的成功部署。
Hadoop用户说:
1、Hadoop生态系统复杂且管理昂贵
2、数据管理–每位数据科学家的2倍数据工程师
3、陡峭的学习曲线,低效率的小型数据集,缓慢的分析
4、真实数据量上的响应时间长
5、需要难以找到和昂贵的技术资源
6、配置和扩展极其困难且昂贵
7、难以保护和治理
8、提供各种角色,身份验证和权限
为了选择正确的现代化方法,企业需要重新设计所有应用程序以匹配新的基础架构
通过对某些现代化进行投资来采取混合方法,例如加速硬件,改进的应用程序,某些SaaS和一些微服务。需要在新平台上按原样重新托管应用程序,并且淘汰旧的应用程序,将Hadoop迁移到云是一种选择,基础架构技术的可用性可能只是本地基础架构成本的一小部分,数据可以从源无缝地流到云处理服务,用户可以在交通繁忙期间进行扩展或横向扩展,从而更轻松地处理大量数据。
混合方法是大多数公司可以从中受益的选择
Hadoop和SQream共同可以实现这一目标,Hadoop提供分布式的,具有成本效益的存储,已经很好地建立为一个数据湖,已经部署并且集成良好,而SQream可在计算和存储中进行扩展,提供高性能的即席查询,利用现有的SQL技能,以及更容易使用。