帐户注册

登录

找回密码

忘记密码了?输入你的注册邮箱,并点击重置,稍后,你将会收到一封密码重置邮件。

spark streaming 适合处理规模不大的流式数据吗?

我有个疑惑,spark网上说法是用于大数据量处理(可以很轻易的做水平拓展),我感觉用 spark 的框架开发其实也有一定的范式上的简易性。 那么如果说业务开始数据量不是很大的流式任务(或者其他业务)用 spark 合适吗?(有没有杀鸡用牛刀这种问题,造成资源浪费?)

查看全文

大数据平台开发人员的核心竞争力是什么?

做大数据平台开发一般对算法要求不高,但是这些大的框架,每一个都像大的黑盒子,如:spark、hadoop、hive、kafka。我最近在研究kafka,但是仅仅是在会用,会选型的阶段。我觉得只要英语ok,完全没什么门槛。想问的问题是:如果想在这个方向上走得更远,应该怎么做,我觉得把源码都撸一遍好像非常不现实,刚入行半年,我scala也不熟悉,有点迷茫,想问问3-5年的从业人员你们怎么做的?

查看全文

如何利用大数据帮助招聘?

互联网时代,每个人都在网络上留下了大量的数据,其中包含着他的生活轨迹、社交言行等个人信息,那么能否依靠对这些数据的分析,从个人的网上行为中剥离出他的兴趣图谱、性格画像、能力评估,帮助企业更高效的实现人岗匹配呢?用户特征的分析,实现人岗匹配欢迎大家提方案

查看全文