网络建模课需要做一个项目,打算做关于中国城市之间每天的火车车次数量。从网上找不到完整的列车时刻表数据,请问有什么方便的办法得到这些数据吗?如果没有办法直接下载到,也请教一下怎么用爬虫来获取数据。PS:一般来说火车时刻表还是固定的,所以只要是最近的某一天的时刻就行了。
查看全文hadoop中map方法读数据的问题?
看了两天hadoop,有个基础概念没明白,假设块大小是64M,我有128M的数据,按理说会启两个mapper,但是mapper默认是按行读数据,比如说64M有1000行,是每个mapper会循环执行map方法1000次?最后每个mapper汇总这1000次的结果交给reducer? 我在程序里设置了 NLineInputFormat.setNumLinesPerSplit(job, 5); map方法里打印一个tag,测试数据有10行,结果打印了10次tag
查看全文支付宝内部有使用golang开发的吗?
灰常喜欢蚂蚁金服,很想准备去面试开发职位。然而,看招聘基本都是java为主,虽然之前也是搞过java,熟悉常用的一些框架,但是最近一年用的都是golang,也挺喜欢。所以想问问支付宝内部开发人员,有没有一些组用golang开发的,而且在招人的,还有有没有一些面试的需要准备的点,哈哈。
查看全文JAVA对数据挖掘工程师来说是必须的吗?
本人统计系数据挖掘方向,一直用的是python实现算法,当时的入门教材是《机器学习实战》,里面用的也是python。但最近发现数据挖掘工程师的招聘要求一般都有JAVA,而且人大数据挖掘中心也推荐学生自学JAVA。想做数据挖掘工程师除了掌握python还需要JAVA吗?
查看全文ejavashop怎么样?
公司需要购买JAVA B2B2C商城,无意中看到ejavashop,咨询了下,售价PC要8W,看看他们客户案例,我去,都是PHP的~~~再看看功能,只有简单的C2C功能~又问了APP,官网说是原生2万,一看,我去,是他吗的WAP封装的,我靠,我们公司安卓技术说几分钟就封装一个~~~
查看全文如何看待程序猿面试各种难,入职后工作却很简单?
出去面试经常会被问到各种高并发,大数据,某某某框架底层怎么实现的之类问题,但进入公司只是做简单的crud,就算精通上述各种也毫无用武之地
查看全文