任务 #4670

zhanyun 更新于 2015-08-18 12:52

之前版本:
最简单的策略是在我们现有的基础上新增一台服务器,只是将我们平台的服务转移到新增的服务器上。新增的服务器和现在提供服务、数据分析的130服务器配置同步数据库,这样可以实现数据处理和平台服务的数据分离,同时可以配置另外的节点用于数据库备份。现在服务器资源就104相对多一点,看看能不能将平台服务放到104上。
当前版本:

现计划服务器资源重新分配如下:

    ①55不动,还是只跑爬虫;

    ②原先在56上的抽取程序转移到104上,tflow(帖子汇总)由130移到104,之后104就提供爬取、抽取的数据库存储和运行抽取程序、帖子汇总程序(tflow);

    ③项目去重、匹配程序放到130上,还有一些类似转储(transfertknowledge、opensourceprojectsmerge)、冗余字段维护、项目热度、影响力计算的程序都放到130上;

    ④平台服务放到56上,提供平台服务的数据库由130同步到56上。

先测试部署,后续可再根据具体情况调整资源分配。

返回

© Copyright 2007~2021 国防科技大学Trustie团队 & IntelliDE 湘ICP备 17009477号

问题和建议
还能输入50个字符 提交

加入QQ群

关注微信APP


×