基于Hadoop技术的海量物流数据的处理
摘 要:Hadoop是一个能够对大量数据进行分布式处理的软件框架,它以一种可靠、高效、可伸缩的方式进行数据处理,能有效处理海量的物流数据。据此,以锦程物流网、中国物通网等物流企业为例,分析其物流数据处理。
关键词:Hadoop技术;大数据;数据模型;物流信息平台
中图分类号:F25 文献标识码:A doi:10.19311/j.cnki.1672-3198.2018.31.018
1 物流信息平台介绍
1.1 物流信息平台分类
物流信息平台分类办法多种多样。按区域分有地方性的物流信息平台和全国性的物流信息平台。如湖南物流信息平台、山东物流信息平台属地方性的物流信息平台;发啦网、中国物通网则是全国性物流信息平台。按运营方可以分为主体自身运营的物流信息平台和第三方物流信息平台;按组织方式则分为封闭式物流信息平台和公共物物流信息平台。封闭式方式如电子口岸系统、物流监管系统、贸易集散地的交易系统。公共物流信息平台如发啦网、锦程物流王、福州港口物流信息平台和南昌物流信息平台等。
1.2 物流信息平台基本功能
物流信息平台对可对物流信息进行收集、存储、处理、输出等,成为决策的物流管理主要依据之一。以锦程物流网、中国物通网为例等。物流信息平台主要功能有:
(1)B2B企业信息发布。
(2)OA办公自动化系统。
(3)CRM客户管理系统。
(4)PDOS进销存管理系统。
(5)TMS车辆运输管理系统。
(6)WMS仓储管理系统。
(7)GPS卫星定位系统等外设接口。
(8)业务系统接口。
(9)物流联运指挥中心系统。
(10)云计算、资源统一管理和调度,向用户提供按需服务。
(11)用户信用评价。
2 Hadoop技术在海量物流数据处理中的应用
2.1 物流信息平台基本框架
物流数据分析平台可以分为接入层(Landing)、整合层(Integration)、表现层(Persentation)、语义层(Semantic)、终端用户应用(End-user applications)、元数据(Metadata)。
2.2 物流信息平台框架分析
(1)接入层(Landing):保持和物流信息系统相同的结构,暂存原始数据。
(2)整合层(Integration):物流企业数据经整合后进行持久存储,创建物流数据存储库存。
(3)表现层(Presentation):针对物流企业为满足用户需求,提供客观数据,建立智能数据模型即'数据集市“。
...
== 试读已结束,如需继续阅读敬请充值会员 ==
|
本站文章均为原创投稿,仅供下载参考,付费用户可查看完整且有格式内容!
(费用标准:38元/2月,98元/2年,微信支付秒开通!) |
升级为会员即可查阅全文 。如需要查阅全文,请 免费注册 或 登录会员 |