Pentaho公司的软件定位一直是做整合数据集成和分析,不过在即将发布的7.0平台中,该公司提供了用于加速和提升数据准备流程的功能。
升级后的分析、集成、数据准备工具于11月发布,支持用户在处理和准备过程中的任何环节直观地检查数据。这样数据科学家、数据工程师和业务分析师都可以使用图表、图形和其它可视化组件来动态检查数据,发现并提前解决潜在的数据质量问题,而无需等到完成整个分析工作才能发现。
例如,他们可以看到整合两个表的数据结果对于支持准确分析来说,是否缺少了很多数值;或者在抽取、转换和加载(ETL)集成处理过程中应用回归分析技术检查是否产生错误信息。Pentaho 7.0还支持IT团队发布预定义数据源给业务用户,这样可以加速数据准备阶段的协作。
Pentaho公司表示,在运行过程中,通过准备流程以协作的方式可视化检查和评估数据,这样的功能可以缩短数据科学家和其它用户为分析用途准备数据的时间。当然,数据工程师不大可能会对数据质量问题创建流程(减少了错误概率)。(2015年日立集团有限公司收购了Pentaho公司)
Pentaho 7.0还提供了新功能,支持与Spark SQL集成,方便ETL开发人员和数据分析师在Apache Spark集群中使用标准SQL的变体查询数据。还有几种其它类似功能也是专为处理大数据环境的数据而设计,包括支持Kafka消息队列系统、Avro和Parquet文件格式。
David Menninger是Ventana研究公司的一名技术分析师,他说Pentaho的新功能混合了分析和数据准备两方面的工作,这可能意味着数据管理的一种发展趋势。
越来越多的企业都希望可以把数据准备和分析任务更紧密地整合到一起,这样整合过程就更能以自服务的形式完成。Menninger说:“自服务数据准备成为了流行趋势。实际上,它需要与分析过程紧密集成。”
现在,Menninger认为Pentaho公司走在了市场的前沿,但是他预计其它厂商会很快跟风,推出比较类似的功能。
Paxata公司就是这样一个自服务数据工具供应商,该公司才初创几年,致力于拓展软件实现更高级功能。规划增加的功能包括:引导客户做必要的数据转换;通过机器学习技术帮助用户在语义层面更好地理解数据。
Paxata公司位于美国加州Redwood市,该公司上个月迈出了第一步,发布了同名软件的更新版本,新版本利用了Paxata连接技术,可以从不同的Hadoop集群、NoSQL数据库和其它系统中抽取整合数据。Paxata公司首席产品官Nenshad Bardoliwalla表示,该公司计划以季度为周期增加更多功能,不过全面打造设想的平台还有很长的路要走。
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号

TechTarget
官方微博

TechTarget中国
翻译
TechTarget特邀编辑。2003年入软件行业,熟悉软件过程所有环节,对机构信息化的各方面有深入理解和实践经验。现就职于某互联网创业公司,目前关注互联网分布式系统架构和机器学习。喜欢传统文化社科哲学(尤喜《周易》、《老子》),喜健身喜抓举(具备抱人引体向上的能力),喜欢中国象棋(具备盲棋1对2的能力)。
相关推荐
-
Spark尚未“成熟” 用户仍需“专业”
虽然Spark的应用对企业而言已经并不陌生,但对于一些企业来说,这项技术可能还是比较“前沿”。
-
【对话Teradata高管】我们很幸运,这是一个“大I小T”的时代
Teradata天睿公司近日在上海举办的“2017 Teradata大数据峰会”上,Teradata天睿公司高管们分享了Teradata在开源技术方面的观点和举措。
-
乘风破浪!拥抱数据洪流
全球产生的数据量达到惊人的地步,2013年生成的数据总量约为3.5 ZB。到2020年,保守估计,全球年数据量将达到44 ZB。企业该如何在大数据的时代取胜?
-
【2017 Teradata大数据峰会直击】Teradata专注提升数据分析能力,致力挖掘客户业务价值
数据分析解决方案供应商Teradata天睿公司今日(2017年5月19日)在上海举办2017 Teradata大数据峰会。