教师教育专业研究生编著出版国内首部教...
胡仲勋近期所发表论文
2012年出版著作
2012年发表在CSSCI期刊论文简介
中心2011 年科研成果盘点
 
  

基于语义的金融行业大数据整合及处理技术

发布日期: 2014/08/22      浏览次数: 46  


 

 基于语义的金融行业大数据整合及处理技术

摘要:随着大数据时代的到来,数据驱动的商业模式曰益受到企业的青睐,通过对大数据的处理和分析,可以更好的进行商业决策、科学计算以及其市场趋势的预测等,数据的重要性日益突显。然而,大数据的一些新的特征给数据处理带来了新的挑战。

目前,在金融领域里,分布广泛的金融系统每天都会产生大量的数据,而风险管理、预测等工作都需要对分散在这些系统中的大量数据进行采集、整合以及处理。一方面由于系统结构的复杂性,尤其是数据存储结构的多样性,导致了传统数据仓库技术无法对大量的异构数据进行整合及处理;另一方面,由于金融行业其行业的特殊性,常常受到各种外界条件的影响,例如合规、政策等,这些外界条件的变化将直接导致对数据分析策略的改变,从而影响到最终的结果。针对上述两方面问题,本文提出了一种可以对复杂金融环境下的异构数据信息进行整合及处理的基于语义的大数据处理系统。

关键词:大数据,语义,分布式计算,数据整合,合规

总结:文章主要内容如下:第一章结合大数据的面临的问题以及金融领域大数据背景,总结了金融领域面临大数据的面临的相关问题,并针对这些问题提出了基于语义的大数据处理系统模型;第二章主要介绍了语义,数据整合,分布式计算等方面的相关技术;第三章从层次结构上阐述了提出的系统模型;第四章详细介绍了基于语义的关系数据整合及分布式査询方案的设计及实现,同时介绍了该系统数据釆集方案;第五章对基于大数据的分布式处理技术进行相关研究,同时对系统性能方面进行了相关测试分析及优化。

Abstract: With the arrival of the era of big data, data driven business model has been more and more popular among the enterprise. With the help of data, we can make better business decisions and scientific computing, and do market trend prediction. Data is more worthy than before. However, some new features of the Big Data have brought new challenges to the data processing.

At present, for the financial industry, there is a lot of data produced by distributed financial system every day, which need to be collected, integrated and processed for risk management and forecast. On one hand, the complexity of the system structure, especially the diversity of the data structure, bring a challenge for the traditional data warehouse technology with heterogeneous data integration and processing; on the other hand,due to the particularity of the financial industry, is influenced frequently by outside, such as compliance, policies, etc., these changes will directly affect the data analysis method, thus affecting the final results. In view of the above two aspects, this paper bring up with a data processing system based on semantic that can deal with the heterogeneous data in the complicated financial environment.

Key words: big data, semantics, distributed computing, data integration, compliance

(杨鹍 计算机应用技术专业 浙江大学硕士学位论文)

 


Copyright © 2013  Center for Educational Leadership,SHNU. 现代校长研修中心 版权所有
地址:上海市桂林路100号 邮政编码:200234    TEL:021-64324185
登录