您所在的位置:蓝旗资讯>科技>大案牍术很神秘吗?成都大数据工程师为你解密

大案牍术很神秘吗?成都大数据工程师为你解密
发布日期:2019-12-03 08:20:31   浏览次数:2800

曹缇

曲淑蕾

《长安十二小时》中神秘的“大官书信”不是很高吗?几千年后的今天,确实有一群专门从事“大案写作”的人。他们是“大数据工程技术人员”。

十一届三中全会提出了建设具有四川独特优势的“5+1”现代工业体系的重大规划。拟重点将电子信息、设备制造、食品饮料、先进材料、能源化工等行业打造成为主营业务超过1万亿元的支柱产业,大力发展数字经济。

今年8月,四川省人民政府发布了《关于加快发展数字经济的指导意见》,指出政府要进一步发展强大的数据产业,努力打造全国大数据生态建设的重要高地、大数据研发的新高点、大数据示范应用的高地、大数据人才聚集的高地。以“数字工业化、产业数字化、数字治理”为主线,加快数字经济发展,为四川治理再上新台阶提供有力支撑。

几年前,“大数据”只是一个模糊的概念。现在它无处不在,创造了巨大的想象力。随着大数据的广泛使用,这个行业也越来越受到重视。今年4月,在人力资源和社会保障部确定的13个新职业中,“大数据工程技术人员”并没有像预期的那样出现。

数据分析显示,到2020年,四川的大数据产值预计将超过1000亿元。什么是大数据?什么是大数据?大数据在哪里?它如何影响我们的日常工作和生活?四川大数据的发展过程是什么?日前,四川新闻网记者采访了银行业数据分析与挖掘高级工程师曹体、成都大数据产业联盟秘书长周袁波、cda数据分析(成都)研究所所长曲淑蕾。他们将带我们了解大数据背后的故事和成都大数据产业的发展。

数据“大”到需要新的技术手段。

行业发展带来的新职业——“大数据工程技术人员”

在人力资源和社会保障部“大数据工程技术人员”的新专业信息中,它被定义为从事大数据收集、清理、分析、治理、挖掘等技术研究的工程技术人员。并利用、管理、维护和服务他们。主要任务包括大数据采集、清洗、存储和管理、分析和挖掘、显示和应用等相关技术的研发。大数据平台架构、技术和标准的研究与应用;大数据收集、清理、建模和分析;监控、管理和确保大数据安全。

什么是大数据?百度百科对大数据的解释是,大数据(it行业术语)是指常规软件工具在一定时间范围内无法捕捉、管理和处理的数据集合。这是一项庞大、高增长和多样化的信息资产,需要一种新的处理模式来拥有更强的决策、洞察和发现能力以及流程优化能力。大数据的5v特性(由ibm提出)是:体积、速度、多样性、价值和准确性。

“我自己的理解是,顾名思义,大数据的关键是大数据。”曹提表示,大数据模型与传统数据模型的一大区别是大数据太大,传统方法无法很好地分析,需要一种新的技术方法。分布式计算是一种新的技术方法。他举了一个在超市买东西要花多少钱的例子。算法非常简单。这只是传统数据,不是大数据。

“大数据由于其数量庞大,并不强调绝对准确性,只要准确性能够确保稳定的回报。”曹提举了一个银行贷款的例子。“例如,客户贷款,银行决定是否贷款。通过对大数据的分析,它将看到未来是否会成为坏账。如果你可能成为坏账,它不会借给你。如果你的风险相对较小,它会的。但无论风力控制有多好,都没有必要确保每笔贷款不会变成坏账。”

成都大数据企业出国访问交流(成都大数据产业联盟提供照片)

周袁波(图片由成都大数据产业联盟提供)

大数据工程流程紧张

注重组织的数据逐层处理和数据存储

曹ti认为,大数据在企业中的应用一般可以分为三类:“以银行为例,一类是风险控制,如银行贷款业务的风险预测;一个是精确营销,例如为某个客户群精确推荐产品或服务;一个是内部管理,如出纳员工作效率评估和工作调动申请。”

"我的大部分工作涉及大数据工程技术."曹体向四川新闻网记者介绍了大数据工程技术人员的日常工作。“例如,如果企业想要应用大数据,它必须先购买设备,然后存储数据。但是,在存钱的时候,我们应该注意组织的规则,而不是随机存储。首先,我们必须有调度规则,然后我们必须有存储规则,否则空间利用率不高。与仓库库存类似,你必须定期堆积,否则数量会减少,拿走后也不容易找到。”

曹ti解释说,这涉及几个层次的数据处理。“数据进来后,首先是原始外观,一般称为层t,然后层t的数据上升到层o,然后层模型的数据出现。层模型的数据再次上升,即c层也称为公共处理层,然后上升到d层应用层,即我们通常看到的各种报告。这样,下一层数据将继续用作处理前一层数据的原材料,以确保存储的数据得到有效利用。”

例如,银行在线贷款

在几秒钟的判断之后是一组复杂的大数据模型。

曹ti表示,大数据的应用对客户来说非常快。例如,银行需要判断他们是否能在几秒钟内借钱给某个人。外行人可能认为这很简单,但事实上背后有一个复杂的大数据模型,“该模型涉及培训和应用。

"银行的系统环境是分开的,一般包括开发、测试和生产三个独立的环境."例如,曹提进一步解释说,要制作一个应用程序或启动一个功能,“首先,你需要在开发环境中开发,构建一个模型,训练模型,然后在测试环境中测试。经过反复测试没有问题后,您可以在严格的安全保证后启动生产环境,然后启动公众可以访问的应用程序。”

“例如,一份贷款申请进来了。经过客户的授权和同意,各种信息数据开始进入模型。因为这个模型以前受过训练,所以它将根据以前设计的规则进行判断,最后会有一个分数。分数越高,你的资格就越好,银行将根据分数判断是否以及向申请人贷款多少。”曹提介绍说,也有一些规则可以一票否决。“例如,如果你在其他银行有逾期贷款或其他严重的信贷问题,获得贷款的机会非常小。”

大数据产业发展潜力巨大

成都对大数据人才的需求超过需求

曹ti坦率地承认,他从一开始就没有从事大数据相关的工作。他毕业于电子科技大学金融专业,在一家银行做系统职员。也正是由于这一时期数据和信息的接触,曹体的职业方向逐渐清晰起来。"之后,在数据挖掘和数据分析方面做了更多的工作."曹体目前在联创容止公司工作,是四川农业信贷项目分析采矿组和关系制图组的组长。他表示,成都大数据环境的氛围非常好,“两个最直观的感受是,越来越多的公司在进行数据分析,越来越多的员工被聘用。”

曹ti认为,如果传统的制造、零售、通信、医疗等行业是一流行业,那么金融、it和互联网就是二流行业,二流行业是指能够与一流行业广泛产生业务关系的行业。而大数据工程是第三层行业,因为它几乎可以与所有的一、二层行业产生业务关系,其前景是无限的。

像曹体一样,还有疾控中心数据分析(成都)研究所所长、疾控中心西南市场数据分析师负责人曲淑蕾。“成都cda数据分析师的市场非常广阔,企业的需求非常大。”曲淑蕾表示,该研究所主要致力于培养大数据和人工智能领域的人才。目前,cda数据分析师认证已经在全球十多个国家和地区完成注册。中国采取国家考试的形式,每年进行两次。认证级别分为三个级别。“随着大数据产业的快速发展,成都对大数据人才的需求将会越来越大,而且仍然供不应求。”

到2020年,四川的大数据产值将超过1000亿元

建议从多个角度促进大数据的高质量发展。

2016年7月,成都大数据产业联盟成立,新成立的成都经济委员会为主管机关。该联盟在民政部门注册,目前有近300个成员单位。今年7月,四川省大数据中心应运而生。该中心是四川省省级机构改革中新组建的省级政府直属主要司级机构。四川的大数据产业经历了一个从无到有、从小到大的过程。目前,大数据已经广泛应用于各级党政机关、通信、金融、交通、医疗、教育、食品安全、社会保障等行业。

由四川省发改委指导、四川大数据发展研究会牵头编写的《四川省大数据发展蓝皮书(2017)》指出,到2020年,四川大数据产值将超过1000亿元,四川大数据产业总收入将占全国大数据产业总收入的10%左右。2018年中国大数据发展指数报告指出,成都大数据发展指数在全国排名第五,仅次于深圳、北京、上海、杭州等城市。成都已成为中西部乃至全国大数据产业发展的龙头城市,在大数据产业领域占据举足轻重的地位。

四川大数据发展在数据资源、基础设施、政策环境、科教实力、人力资源、行业规模和发展势头等方面具有较强的比较优势,逐步形成了以行业应用导向、大数据技术为引擎、云计算为基础的大数据产业生态系统成都大数据产业联盟秘书长周袁波对四川大数据产业的发展非常乐观。他说,与全国其他城市相比,成都在创业氛围、人才政策和大学资源方面的优势吸引了大量大数据企业和人才留在成都。

然而,成都大数据的发展仍有一些需要改进的地方。为此,周袁波建议四川建设大数据产业生态圈,打造交通、医疗、金融、教育、农业等领域的专业大数据功能平台。,收集人才、技术、数据、市场、资本等产业要素。形成产业加速器,创新综合解决方案推广应用模式。同时,制定产业规划,建立评估体系,推进数据资源开放共享,培养本地潜在企业,引进行业龙头企业,“从更广的范围和不同的角度促进四川大数据产业的高质量发展”

背景扩展:

四川是中国八大通信枢纽之一,也是超大型数据中心的所在地。率先建设“全光网络省”和全国第一个“千兆宽带城市群”,建成成都国家骨干直接连接点。成都已获得三大运营商首批5g规模网络试点城市资格。截至2018年10月底,互联网省级出口总带宽达到22.9tbps,建成198,000个4g基站和6,573万4g用户。该省行政村可接入98%的光纤,4g覆盖面超过93%。开通窄带物联网基站41,000个,基本实现城乡连续覆盖,物联网终端用户2,443万人,居全国第八位。Iptv拥有1384万用户,占全国用户总数的9.1%,用户规模排名第一。(记者李单雯纪)

(编辑:罗宇,高红霞)

广东11选5投注 云南十一选五开奖结果 黑龙江十一选五开奖结果 甘肃快3投注 重庆彩票网

相关文章

© Copyright 2018-2019 jvankempen.com 蓝旗资讯 Inc. All Rights Reserved.

关于我们 | 广告合作 | 版权声明 | 意见反馈 | 联系方式 | 原创投稿 | 网站地图 |