• 首页
  • 工种与考证
  • 全部课程
  • 文章资讯
  • 培训认证
  • XR浏览器下载
  • 分销联盟
  • 学习中心 APP下载
    扫码下载-100VRAPP
    扫码下载-技能培训APP
    扫码下载-互动科普APP
    建议意见 官方客服

    官方客服

    您可以与在线客服进行沟通或者拨打客服热线获得帮助

    电话:0592-2529323    0592-5551325

    邮箱:help@onesoft.com.cn

    在线咨询:

    当前位置:首页 > 文章资讯 > 信息技术 > 大数据工程技术人员:打造便捷生活

    大数据工程技术人员:打造便捷生活

    发表于:2019-07-02
    阅读:1717
    评论:0

    大数据工程技术人员是人社部发布的13个新职业之一。据计算机专业论坛统计,目前全国大数据人才仅为46万,未来3-5年内,大数据人才缺口150万。各企业纷纷以高薪聘请大数据人才,国内大数据工程技术人员平均年薪30-50万元。

    虽然是新职业,但人们的生活早已与大数据工程息息相关:用手机软件查询水电燃气用量、网购、一站式政务服务……我们享受到的便捷生活背后总少不了大数据工程技术人员。

    建立大数据

    “让数据多跑路,让你我少跑腿”

    刘岩

    今年48岁的刘岩算是IT行业里年龄比较大的,当年从广州暨南大学计算机专业毕业 ,20多年来一直在互联网行业摸爬滚打。从最开始的软件开发到现在的大数据采集、分析,刘岩说,如果将IT行业比喻成大海,大数据就是大海中最前端的潮头,大数据工程技术人员就是大海中最前沿的弄潮儿。

    “最早期的大数据需求是从上世纪90年代开始的。”刘岩说,当时国家推行政务信息化,要求政府将各类信息登记和存储。比如,民政部门要把本地的婚姻情况录入婚姻登记系统,公安部门把本地市民信息录入公民信息系统。最开始这些系统都是孤立的,只针对内部人员使用。随着信息化不断发展,各系统之间信息交互需求增加,各个独立数据系统进入海量大数据融合阶段,政府间的信息互容互通,一直发展到如今“一个窗口办齐所有业务”的高度融合,真正实现“让数据多跑路,让百姓少跑腿”的设计初衷。

    现在,刘岩作为哈尔滨国裕数据技术服务有限公司大数据平台规划管理高级工程师,负责建设智慧城市大数据资源管理中心项目。“一个智慧城市建设,包括许多子系统,我们的工作就是将这些子系统数据进行数据化采集。举个例子,一个城市包含许多委办局,有的委办局信息化做得比较好,那么我们就在大数据信息系统中采集、清洗、分析并加以利用、管理和维护。”刘岩说,所谓“清洗”,就是说并不是所有信息都是规范的、数字化的,有时候有的信息只记载某段时间的数据,有的信息前后记录标准不一,这时就需要大数据工程技术人员将这些非结构化或半结构化数据处理成结构化数据,统一录入系统,对于那些残缺不全的数据还要想办法弥补上。

    还有的时候,一些单位从没有进行过信息化数据处理,许多数据都是手工记录的,甚至根本就没有,这就需要相关工作人员查找资料,尽量找回资料。“这个过程其实是最耗费时间的,许多时候我们要一个单位一个单位去沟通,将那些常年放置在文件柜里落满尘埃的数据翻出来,让这些数据发挥价值。”刘岩说。

    如何发挥数据的价值呢?“我们将一个城市的相关数据整理后录入大数据系统,根据我们设定的程序,系统会对海量数据进行再次挖掘和分析,从而得出横向和纵向的分析数据,进而对未来进行预测。”比如,某一个城市路口的视频监控,既可以抓拍车辆、行人违章情况,也可以对车流量、信号灯等情况进行监控,通过一段时间的数据比较和分析,优化出最合理的车流导向和信号灯分配,此外还能运用视频监控抓获违法犯罪人员。

    目前,应用大数据对城市进行智慧管理几乎已遍布全国各大中城市,并正在向中小城镇渗透中。让更多人办事更便捷、轻松,就是大数据应用的最大成果。2015年,刘岩在大庆建设智慧城市并建设了一个专门服务百姓的“百湖汇”APP软件,大庆市民用这个软件查询水电气等,实现一站式缴费。

    “不久的将来,随着大数据进一步发展,城市的大数据系统将更加开放,更加以人为本。”刘岩说,也许到那时,老百姓可以到家门口的派出所办工商执照,甚至不用出门,在家里通过网络就可办理户口迁移手续。

    管理大数据

    各种数据被托管到数据中心

    邵天富

    老家在广州的邵天富来哈尔滨工作刚刚三个月,尽管常常思念远在万里之遥的新婚妻子,但当邵天富全神贯注于大数据运营的时候,似乎把整个世界都抛在了脑后。今年33岁的邵天富正好赶上了中国互联网跨越式发展的黄金期,当年他从广东工业大学机电一体化专业毕业,就一头扎入大数据管理“蓝海”,如今已成为一个技术全面、经验丰富的大数据工程技术人员。用他们自己的话说,只要地球不爆炸,大数据永远不停歇。

    每天早上8点半,邵天富准时出现在位于平房哈南十五路的哈尔滨云谷名气通数据服务有限公司数据中心操控平台中心,同时听取夜班技术人员对各种技术参数的监控情况汇报。“昨天晚上各项数据都在正常范围内,8号机电池近期需要更换。”主管机房动力的李旭说完,随手把数据监控报告递给邵天富。

    如今,小到APP,大到腾讯、阿里这样的互联网企业,都在寻求第三方专业的数据服务。“其实大部分人看到的只是手机或电脑上小小的APP,但它后台所用到的服务器多达上万台,这背后有无数数据工作人员在默默工作着。”带着浓重广东腔的邵天富说,他们其实就像是给客户提供一个网络大房子,让这些客户在房子里进行各种政务、商业活动,而他们就是房子的管家,对房子提供保洁、维护、维修等专业性工作。“可以这么说,凡是涉及到网站、电脑等互联网服务的政府机关、企事业单位、商业用户,都需要稳定持续的互联网大数据托管服务。”

    作为中立的第三方数据中心,它要保证为客户提供7×24×365的全天候网络数据服务。“我们的数据中心每一秒都必须有人值守。”邵天富说,从设备维护、参数记录及分析、数据监控预警,到看视频监控,是否有可疑人员进入,分析是否有异常情况。根据数据监控,在还没有发生事故之前,核查有可能出现问题的点并作设备保养,即设备换电池、加润滑油等。

    实际上,许多从事大数据管理的技术人员都是从相关专业转型而来,他们既要懂计算机、互联网,也要懂电气、暖通甚至消防等方面知识。每个班组要有两名相关专业工作人员值班,因此一个班至少有6-8人在岗工作,每天三班至少有18-24人在岗。

    邵天富说,哈尔滨某高校曾经想做一个数据管理,计划使用50个机柜,如果自己做,要获得用电、网络、消防等方面的使用许可,一个数据中心需要20个专业人员7×24的服务。如果采用专业托管服务至少节省1/3的费用。

    专业化大数据托管服务最早是从2008年至2009年开始的,在这之前,各个公司都是自己组建机房。随着各大公司与互联网结合得越来越紧密,自有机房已经满足不了发展的需要。到2010年,许多原来做别的领域的公司都开始做大数据服务了。这时邵天富意识到,大数据的春天来了。尽管大量的数据公司涌入,仍然无法满足高速增长的市场需求。

    大爆发时代

        站在全球视角下,中国大数据中心的拥有量还不到美国的1/3,这与中国互联网的高速发展远远不匹配,因此中国大数据行业必然迎来大爆发时代。5G和无人驾驶时代来临,更是大数据行业的重大利好,届时网络会更快,使用人群会更多,这就要求服务器和机房更大、更专业,满足更多需求。“以视频网站为例,看视频的人越来越多,过去公司托管50100个机柜,现在已满足不了网络需求,很可能再租几千个机柜都不够用。”邵天富说,到那时,会有更多跟大数据相关的从业人员向这个行业靠拢、甚至转行过来。

         从全国范围看,大数据业务量将越来越多,但目前大数据服务中心多集中在北京、上海等大城市。“因为大城市数据服务需求量大,而且从技术层面看,远距离数据传输还存在一定困难。”邵天富说,从未来发展看,远距离传输难题会在不久的将来被攻破。到那时,哈尔滨在大数据管理方面的优势会更加突出,会有越来越多的数据中心搬到哈尔滨来。

    以上就是100唯尔(100vr.com)小编为您介绍的关于大数据工程技术的知识技巧了,学习以上的大数据工程技术人员:打造便捷生活知识,对于大数据工程技术的帮助都是非常大的,这也是新手学习信息技术所需要注意的地方。如果使用100唯尔还有什么问题可以点击右侧人工服务,我们会有专业的人士来为您解答。

    本站在转载文章时均注明来源出处,转载目的在于传递更多信息,未用于商业用途。如因本站的文章、图片等在内容、版权或其它方面存在问题或异议,请与本站联系(电话:0592-5551325,邮箱:help@onesoft.com.cn),本站将作妥善处理。

    收藏

    赞一个

    踩一下

    换一批

    大数据工程技术课程推荐

    网络安全技术

    计算机网络技术

    123483人学过

    ¥99/月

    数据库基础

    软件与信息服务

    68677人学过

    ¥99/月

    综合布线技术

    计算机网络技术

    125860人学过

    ¥99/月

    计算机组装与维修

    计算机与数码产品维修

    69273人学过

    ¥99/月

    计算机网络基础

    计算机网络技术

    119499人学过

    ¥99/月

    信息技术客服中心

    王老师

    立即交谈

    林老师

    立即交谈
    更多>>

    推荐阅读

    100VR精品课程推荐

    评价

    0
    发表评论

    0/500字

    更多>>

    最新文章

    福建省人力资源和社会保障厅 福建省工业和信息化厅发布关于推进产业数字技能强链建设五条措施的通知

    近日,福建省人力资源和社会保障厅、福建省工业和信息化厅发布《关于推进产业数字技能强链建设五条措施的通知》,进一步提升福建省产业技工数字技能水平,锻造高质量产业技能生态链,更好适应数字福建建设和新型工业化、工业数字化转型需要。

    浙江省政府新闻办举行新闻发布会介绍《浙江省科学技术进步条例》有关情况

    科技是第一生产力,创新是引领发展的第一动力。2023年9月28日,浙江省第十四届人民代表大会常务委员会第五次会议修订通过了《浙江省科学技术进步条例》,《条例》自2023年12月1日起施行。 11月17日上午,省政府新闻办举行新闻发布会,介绍《条例》有关情况。现场,发布人还就大家关心的问题作了回答。省教育厅副厅长、新闻发言人陈峰出席发布会并回答相关问题。 浙江将如何加强青少年的科学素养?浙江的高等学校将如何贯彻落实科技进步条例? 陈峰:要深化中小学校的“双减”工作,一方面做好过重课业负担的“减法”,另一方面做好科学教育的“加法”。重点是强化实验教学,增加场景式、沉浸式的科学实践活动,引导学生更多地动手实验、亲身体验,让学生在科学教育和科技实践中学到知识、爱上科学。同时要改进中考、高考的评价导向,增加实验操作考查考核的比重,引导中小学生切实提高探索兴趣和实验能力。 高校是教育、科技、人才的融合交汇点,是人才培养的主阵地和科技创新的主力军。 这些年来,浙江高校承担了全省80%以上的国家自然科学基金项目;在上周刚刚公布的2022年度浙江省科学技术奖中,全省高校共获奖145项,占总数的49%;其中一等奖47项,占总数的78%。下一步,高校将重点抓好以下几件事: •培养高层次人才。浙江高校每年向社会输送近40万名大学生,他们是科技创新的重要生力军。我们要加大基础人才培养力度,持续扩大本科及以上人才培养规模,让浙江孩子有更多的机会读大学、读研究生,为科技进步培养更多后备力量。 •推进有组织科研。加快建设一批高水平的学科专业和科研平台。同时按照“问题导向、需求导向、目标导向”,围绕国家重大战略需要和生产一线实际需求,有组织开展科研创新和技术攻关,促进科教融汇、产教融合。 •激发科学家活力。《条例》就引才、育才、用才作了专门规定,并提出了许多激励创新创造、扩大科研自主的政策。要用好法规的红利,激发高校科研人员更多的活力,努力让科技创造于国家有益、于个人有利。

    黑龙江省每年将培养8万名数字技术技能人员

    近日,黑龙江省数字技术工程师培育项目启动仪式在哈尔滨工业大学举行。数字技术工程师培育项目将利用10年时间,每年培养培训数字技术技能人员8万人左右。对取得合格证书且与黑龙省企事业单位签订劳动(聘用)合同、缴纳社会保险费满6个月人员,可享受4000元-6000元/人次的培训补贴。 数字技术工程师培育项目是专业技术人才知识更新工程的重点项目之一,围绕智能制造、人工智能、物联网、大数据、云计算、数字化管理、工业互联网、虚拟现实、区块链、集成电路等数字技术技能领域,分职业、分方向、分等级开展规范化培训、社会化评价。 今年,省人社厅制定出台了数字技术工程师培育项目实施方案,计划利用10年左右时间,培养一大批具有良好科学素养、精于实操应用、能够解决复杂问题的数字技术工程师。着眼发挥政策激励正向引导作用,对参加培育且考核合格的学员,给予继续教育、职称贯通、培训补贴、聘用激励等四方面优惠政策。目前,我省有哈尔滨工业大学、哈尔滨工程大学、黑龙江大学、东北农业大学4所数字技术工程师培训机构,可以自主开展大数据、智能制造、区块链、人工智能、物联网、云计算、数字化管理师7个职业,后续会根据人社部遴选情况逐步增加。 参加数字技术工程师培训,取得的相应学时可登记为当年继续教育专业课学时(全国有效);评价合格获得初级、中级《专业技术等级证书》,可分别直接认定为助理工程师、工程师。支持用人单位根据个人培训及评价结果择优聘用取得《专业技术等级证书》人员,事业单位可按聘用专业技术岗位等级兑现相应待遇,鼓励企业将薪酬待遇与专业技术等级相挂钩,激励引导数字技术从业人员加强专业知识更新。

    青海省数字技术技能人才培育项目实施方案16日起实施

    近日,青海省人力资源和社会保障厅发布《数字技术技能人才培育项目实施方案》,探索构建培训、评价、激励一体化的数字技术工程师培养体系,为推动青海省数字产业化和产业数字化协同发展提供人才支撑。预计到2025年末,培育至少1200名具有良好科学素养、精于实操应用、能够解决复杂问题的数字技术技能人才。在激励保障上,明确将数字技术技能人才培育项目纳入省内职业技能提升行动“两目录一系统”统一管理。对完成规定学时和内容,且取得培训合格证书和相应专业技术等级证书的人员,可按有关规定申领相关职业培训补贴,同时还可享受继续教育学时认定、脱产学习期间保留与在岗同等的工资福利等待遇,以及岗位聘任、职务职级晋升、评优评奖、科研项目等方面的利好政策。

    江苏省教育厅公示江苏省中等职业学校第二批优质专业遴选结果

    近日,江苏省教育厅在其官网公示江苏省中等职业学校第二批优质专业遴选结果,根据《省教育厅关于开展江苏省中等职业学校第二批优质专业建设工作的通知》(苏教职函〔2023〕26号)要求,经各设区市申报、专家评审,拟确定151个专业为江苏省中等职业学校第二批优质专业。

    江苏省中等职业学校 第二批优质专业遴选结果

    近日,江苏省教育厅在其官网公示江苏省中等职业学校第二批优质专业遴选结果,根据《省教育厅关于开展江苏省中等职业学校第二批优质专业建设工作的通知》(苏教职函〔2023〕26号)要求,经各设区市申报、专家评审,拟确定151个专业为江苏省中等职业学校第二批优质专业。

    广东拟出台政策规范学徒制培训工作 培训企业最高可申领补贴8500元/人

    近日,广东省人力资源和社会保障厅在其官网发布关于公开征求《关于做好产教评技能生态链学徒制培训工作的通知(征求意见稿)》意见的公告,按照《广东省行政机关规范性文件管理规定》等有关规定,向社会公开征求意见。截止征求意见时间未收到有效反馈。 在附件《通知》明确,学生学徒制培训按照每人5000元标准给予补贴,由开展培训的生态企业或接受委托牵头统一组织培训的链主企业申领;技培生学徒制培训按照每人5000-8500元标准给予补贴,具体标准根据其获得证书及相应等级确定,由开展培训的生态企业申领。

    教育部拟同意:职业本科将新增2所

    教育部发布《关于拟同意设置本科高等学校的公示》。公示指出,根据《中华人民共和国高等教育法》《普通高等学校设置暂行条例》《普通本科学校设置暂行规定》有关规定以及第八届全国高等学校设置评议委员会考察评议结果,经教育部党组会议审议,拟同意设置安徽公安学院等5所学校,现予公示。公示时间为2023年11月20日至11月24日。

    加载更多...