想要为以后可能要做的事情做下准备，到目前为止做过分析拿到手的还都是经过一串pipeline预处理过的比较干净的数据，想要知道搭建这些pipeline一般需要哪些工具。比如，未经处理的机器生成的文本log一类，要处理成可以进行分析、建模的形式一般需要哪些步骤，哪些工具是比较必要的？

如果是的话，有什么办法能跳出这个限制吗？

大型企业老总，最想看到哪些企业内部数据？（人事管理、行政方面的，经营类的不算）

大数据

公司要做大数据分析的团队搭建，作为hr对这个行业一无所知，还请各位牛人指点。一个合理的大数据分析团队应该具备哪些人才，这些人才应该具备哪些基本素质，国内做的比较好的大数据分析公司有哪些？

微信上有吉姆兄弟定制衬衣的免费领的活动，是想调用户地址收集大数据吗？是骗局吗？

和居民楼的房价/租金、地段、户型等等因素有相关性吗？更准确地问是“那栋楼里有百分之多少的居民当晚做爱了”，纯粹是好奇…==================又忽然意识到这个问题很难进行数据收集，因为居民们应该不太愿意配合回答问题。脑洞大开地想了一下除非有个开发商在交房前给每户的床都安个传感器，不过那样应该就侵犯居民隐私权了(~_~)