数猎云:情报信息大数据解决方案

2018年08月20日 由 荟荟 发表 722662 0
项目背景:

某科学院于1977年11月成立,由直属单位和中央在沪单位组成,是上海应用技术研究与开发的重要力量。科学院涉及到的技术领域广泛,研究的课题包括各行各业。作为上海技术和开发的重要力量,多次接受和完成上级下达的科研任务。除了完成科研任务外,科学院的自主研发团队,随时关注当今科学动态,保持行业的领先性。近两年来,随着科学技术的爆炸式发展,使得以前的通过人工方法追随热点变的越来越不可能。又随着专业网站、论坛、微博的发展,越来越多的科技热点被放到网络上讨论。这种场景正好让大数据处理大显身手。悦岚(上海)数据服务有限公司作为业内领先的大数据服务商,其核心产品—数猎敏捷大数据开发工具,大大降低了大数据开发的门槛,大大缩短了项目周期。

项目需求:

1. 最新科技动态实时监控
2. 基于大数据的科技热点热度分析
3. 科技热点对比分析
4. 简便的情报和文献服务信息检索

项目特征:

1. 媒体覆盖量宽,数十个网站、论坛及社交网络
2. 原始数据,包括微博等社交网站,目前已累计将近50G的数据,预计年底将增长至150G左右,未来5年在1-2T
3. 大量非结构化数据:微博、论坛网页等需要进行情感分析:支持、中立、反对等
4. 系统反应:近实时响应,5秒以内

项目挑战:


1. 媒体覆盖广,而且都是非结构化数据
2. 需要对内容进行解析,判断该内容的观点:支持,中立,反对等
3. 系统实时性要求高



解决方案:

[caption id="attachment_26994" align="aligncenter" width="300"] 情报信息项目解决方案图[/caption]


项目成果:



[caption id="attachment_26995" align="aligncenter" width="300"] 情报信息项目成果图[/caption]

欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
写评论取消
回复取消