大数据技术中的Hadoop和Spark计算是否适合实现OLTP系统的业务数据分析?

理由
举报 取消

大数据技术一般用来结合机器学习和图计算做数据挖掘和预测。想问问有没有将Spark、Hadoop等计算框架用到传统OLTP系统当中,提高运算速度的。OLTP系统中计算的特点:1. 计算逻辑非常复杂。涉及很多关联、筛选、聚合、分组等。2. 参与单次计算的数据量不会太大。几百M到几G。目前用Spark开发了几个功能做测试,发现效果并不理想。对这块比较迷茫。

2017年12月15日 1 条回复 1002 次浏览

发起人:龙虾 初入职场

回复 ( 1 )

  1. 蒋锴
    理由
    举报 取消

    SnappyData an open source OLTP + OLAP database integrated with Spark

    Apache Phoenix enables OLTP and operational analytics in Hadoop for low latency applications

我来回答

Captcha 点击图片更换验证码