e-works数字化企业网  »  文章频道  »  基础信息化  »  大数据

大数据技术发展趋势及灯塔大数据行业应用平台

2017/3/20    来源:中兴通讯技术    作者:王若倪  赵慧伶      
关键字:灯塔大数据  数据库架构  
指出大数据发展的趋势:混合数据存储是大数据技术的基础;融合数据库架构是大数据发展的趋势;异构数据关联是大数据平台的关键;行业知识库是产业互联网应用发展的要素;深度标签是大数据挖掘的核心技术之一。

    (2)互联网大数据采集
    
    互联网大数据采集通过分布式爬虫DTSpider进行。DTSpider支持节点动态接入,有效提升爬取效率,避免IP封锁,具有良好的稳定性和可扩展性。
    
    (3)企业自有数据接入
    
    基于ID图谱,可对企业的客户管理系统(CRM)数据进行导入与融合。订单及其他业务数据,也可导入井可对接灯塔平台主体数据,支持大数据分析。
    
    目前,灯塔大数据行应用平台已采集井汇聚电信数据600多亿条,外部数据5亿条。
 
    4、灯塔大数据的行业应用
    
    在混合数据库、ID关联模型、用户深度标签、行业知识库、统一数据采集与存储等几项关键技术的支持之上,灯塔大数据行业应用平台打造了市场研究、泛义征信、地理洞察等三大领域的6款大数据应用,实现了数据产品及服务的规范化、流程化,探索出大数据价值落地的商业模式。其中,在市场研究领域,基于灯塔平台行业知识库、深度标签等数据能力,我们研发了零告研究、消费者研究、决策路径分析等方面的大数据应用;在泛义征信领域,基于灯塔平台ID图谱、深度标签等数据能力,我们研发了用户画像等技术,应用于人力资源、企业征信等场合;在地理洞察领域,基于灯塔平台ID图谱、深度标签等数据能力,结合第三方GIS能力,我们打造了人群流量监测、迁徙分析、店铺选址等应用。
 
电信网络大数据二次采集模式
 
图6 电信网络大数据二次采集模式
 
    (1)灯塔在线零研
    
    灯塔在线零研基于电信管道数据,打造电商分析能力,提供在线零告研究业务,数据更新频率最快可达T+1,支持联机分析处理(OLAP)查询,分析维度多达20个。
    
    (2)灯塔消费者洞察
    
    与合作伙伴共同研发的灯塔消费者洞察应用,可以实现电商内容监测、论坛内容监测、用户多维画像等功能,支持基础人口属性和互联网行为画像。
    
    (3)灯塔大数据招聘
    
    与在线人力资源行业相结合,提供求职人员的个人画像新型简历,包括量化的行为偏好、性格特征、个人优势数据,覆盖消费能力、学习指数、作息指数、勤奋程度、运动指数等多种维度,从而基于用户的互联网行为为企业提供客观的招聘参考
    
    (4)灯塔背景调查
    
    将网络行为报告与第三方个人数据相结合,研发井上线新型在线背景调查产品,打造更加高效、完善的背景调查体系。
    
    (5)灯塔在线人口普查
    
    灯塔在线人口普查基于地理位置及互联网行为数据,为客户提供基础人口普查、人口迁徙分析和互联网偏好分析等服务。
    
    (6)灯塔慧选址
    
    灯塔慧选址结合灯塔标签数据和线下位置数据,能够为客户提供在线选址、运营分析等功能。
    
    除了以上6种应用之外,灯塔大数据行业应用平台还紧跟市场趋势及热点事件,产出10多份高质量数据分析报告,例如“2015年一季度奶粉市场研究告”、“2015抗战胜利日大阅兵互联网分析”、“2015双十一未消费人群报告”等,并通过移动互联网进行传播,覆盖近万互联网受众,吸引了大数据行业关注。
 
    5、结束语
    
    作为快速发展的新兴产业,大数据已经上升到国家战略层面,成为整个社会最有价值的资产。大数据已经渗透到各个行业领域,其行业应用具有广阔的发展空间。
    
    灯塔大数据行业应用平台立足自主研发,深入研究大数据底层平台能力及数据分析挖掘能力,充分发挥运营商数据与外部数据相结合的优势,加速产业升级和商业模式创新。灯塔大数据旨在充分发挥数据价值,通过技术创新和应用创新共同驱动,与行业合作伙伴共同打造大数据行业应用生态圈。未来,灯塔大数据平台将面向房地产、汽车、金融等行业领域打造更多的行业应用产品井提供服务。
 
责任编辑:李欢
本文为授权转载文章,任何人未经原授权方同意,不得复制、转载、摘编等任何方式进行使用,e-works不承担由此而产生的任何法律责任! 如有异议请及时告之,以便进行及时处理。联系方式:editor@e-works.net.cn tel:027-87592219/20/21。
兴趣阅读
相关资料
e-works
官方微信
掌上
信息化
编辑推荐
新闻推荐
博客推荐
视频推荐