大数据

金融大数据风控模型「建议收藏」https://www.secrss.com/articles/27699导读：金融是AI赋能传统行业的重要赛道。本次分享的主要内容为金融大数据风控模型在度小满金融的实践。主要介绍金融大数据风控模型的主要技术方法与在应用层面的主要问题，并结合新冠疫情背景下，探讨下风控模型的发展。01金融大数据风控模型的技术方法1.风险管理中的金融科技风险管理中的金融科技主要包括两个方面：一方面是传统金融的风险管理，包括： A卡（ApplicationScorecard，申请评分卡） .

七牛云大数据平台建设实践七牛云CEO许式伟首次披露七牛云在大数据方向的产品思路。

卷王指南，大学计算机专业，面临分专业，计科，软工，大数据，物联网，网络工程，该选什么？同学们好，我是王老师——二哥呀！（笑喷）好巧！前几天有同学私信问过我这个问题：大学计算机专业，面临分专业，计科，软工，大数据，物联网，网络工程，该选什么？再加上高考结束后填报志愿，想必CSDN上有很多同学挺迷茫的。我就来（主观地）一一分析下，从后往前。网络工程，听起来还算是蛮高端大气上档次的，大家可以去百度百科或者维基百科看一下这个专业的解释。我的理解是网络工程是将计算机以及其他设备串联完成网络通信，以及智能化监控的学科。主要的分支有：路由交换、网络安全、无线网络等等。我之前在的一个公司（十年

大数据建模流程之数据处理[通俗易懂]原文链接数据是建模的基础，也是研究事物发展规律的材料。数据本身的可信度和处理的方式将直接决定模型的天花板在何处。一个太过杂乱的数据，无论用多么精炼的模型都无法解决数据的本质问题，也就造成了模型的效果不理想的效果。这也是我们目前所要攻克的壁垒。但是，目前我们市场对的数据或者科研的数据并不是完全杂乱无章的，基本都是有规律可循的，因此，用模型算法去进行科学的分析，可以主观情绪对决策的影响。所以数据是非常重要的一部分。那么，接下来我们就详细说一下数据的处理与分析。一.数据的基本特征当看到数据的时候，首要做的并

“大数据管理局”让大数据共用共享近日，广州市政府官方网站公布了工信委、商务委和国资委3个部门的“三定方案”。三个部门共“定编”339名，其中商务委编制最多，占比超4成。机构设置方面，工信委下设的广州市大数据管理局（正处级）颇具创新，其承载着建设工业大数据库等9项重要职责。城市发展到了今天这么大的体量，社会治理模式也需要不断升级。大数据，无疑是一个重要的发展方向。随着网络的普及…

spark处理大数据的几个实例介绍在集群中跑应用，而不是在shell中感受写spark应用的过程整个过程为：1、案例分析：要用哪些spark的RDD的API2、编程实现:用到scala，3、提交到集群执行：如何提交到集群，文件是否先传到HDFS上4、监控执行结果：通过web可以看到介绍了四个案例：比如统计1千万个人的平均身高，如果用其他语言，估计要好几小时，因为磁盘读写，要反复计算用了sp

Vue大数据可视化（大屏展示）解决方案一个基于vue、datav、Echart框架的大数据可视化（大屏展示）模板，最近更新了详细的介绍说明，实现大数据可视化。通过vue组件实现数据动态刷新渲染，内部图表可自由替换。部分图表使用DataV自带组件，可自由进行更改，持续更新…项目地址：vue-big-screen（码云）一、项目描述一个基于vue、datav、Echart框架的”数据大屏项目”，通过…

工商银行近20年实时大数据平台建设历程「建议收藏」全文共4000个字，建议阅读10分钟一、工行实时大数据平台建设历程工商银行从2002年开始建设数据集市，当时主要使用Oracle类单机版的关系型数据库。随着数据量不断增加，开始引入TD、ED等国外高端一体机。2014年工行正式基于Hadoop技术建设了大数据平台，在其之上构建了企业级数据湖及数据仓库。2017年，随着AI技术的兴起，又开始建设机器学…

大数据建模与分析挖掘相关了解「建议收藏」一.大数据总体架构与规划二.各类数据的采集三.相关名词的了解MP：MapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。概念”Map（映射）“和”Reduce（归约）”，是它们的主要思想，都是从函数式编程语言里借来的，还有从矢量编程语言里借来的特性。它极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。当前的软件实现是指定一个Ma…

孟小峰：大数据管理与数据思维孟小峰：大数据管理与数据思维大数据的规模效应给数据存储、管理以及数据分析带来了极大的挑战，数据管理方式上的变革正在酝酿和发生。本文对大数据的基本概念进行剖析，归纳大数据时代所面临的新挑战，并对大数据的主要应用做简单对比。在此基础上，阐述大数据处理的基本框架，并就云计算技术对于大数据时代数据管理所产生的作用进阅读全文和小伙伴们一起来吐槽