由wangtao 更新于 2015-08-19 08:14
现计划服务器资源重新分配如下:
①55不动,还是只跑爬虫;
②原先在56上的抽取程序转移到104上,tflow(帖子汇总)由130移到104,之后104就提供爬取、抽取的数据库存储和运行抽取程序、帖子汇总程序(tflow);
③项目去重、匹配程序放到130上,还有一些类似转储(transfertknowledge、opensourceprojectsmerge)、冗余字段维护、项目热度、影响力计算的程序都放到130上;
④平台服务放到56上,提供平台服务的数据库由130同步到56上。
先测试部署,后续可再根据具体情况调整资源分配。
现计划服务器资源重新分配如下:
①55不动,还是只跑爬虫;
②原先在56上的抽取程序转移到104上,tflow(帖子汇总)由130移到104,之后104就提供爬取、抽取的数据库存储和运行抽取程序、帖子汇总程序(tflow);
③项目去重、匹配程序放到130上,还有一些类似转储(transfertknowledge、opensourceprojectsmerge)、冗余字段维护、项目热度、影响力计算的程序都放到130上;
④平台服务放到56上,提供平台服务的数据库由130同步到56上。
先测试部署,后续可再根据具体情况调整资源分配。