有关大数据实训过程简介范文(5篇)
每个人都曾试图在平淡的学习、工作和生活中写一篇文章。写作是培养人的观察、联想、想象、思维和记忆的重要手段。写范文的时候需要注意什么呢?有哪些格式需要注意呢?接下来小编就给大家介绍一下优秀的范文该怎么写,我们一起来看一看吧。
有关大数据实训过程简介范文(推荐)一
1、负责企业大数据平台的基础建设、管理及制定拓展规划;
2、负责大数据平台相关自动化服务工具的设计、开发;
3、参与hadoop、hbase、spark等核心平台组件的开发、优化;
4、对平台特殊场景化的数据应用制定相关实践方案;
5、大数据团队的搭建。
任职资格:
1、统招本科以上学历,计算机等相关专业,5年以上工作经验;
2、具有hadoop等大规模集群管理经验、海量(pb)数据处理经验;
3、精通hadoop、hive、hbase等离线平台相关组件的原理机制;
4、了解或熟悉storm/spark/redis/kafka/mongodb等分布式系统;
5、熟悉高并发、分布式开发等相关知识,具有后端服务优化相关经验;
6、熟悉爬虫常用框架以及反爬技术;
7、具有良好的沟通能力、分析问题与攻关问题的能力;
8、有责任心,工作积极,对新领域新技术有热情。
有关大数据实训过程简介范文(推荐)二
职责:
1. db2数据库开发和应用实施,负责数据库维护和优化;
2. 历史数据库与数据仓库数据运维管理,性能分析及应用调优;
3. 数据仓库、数据集市的建模开发和建设维护工作;
4. 数据应用实施项目的维护、管理优化和推广培训工作。
岗位要求:
1. 本科及以上学历, 计算机相关专业优先,一年以上工作经验;
2. 熟悉关系型数据库、存储过程开发、脚本语言开发和linux系统;
3. 独立的思维能力,乐于沟通、协作,具备高度的自我约束能力、学习能力和表达能力,能够承担较大工作压力和责任;
4. 具有大数据处理和分析领域技术规划、架构设计经验者优先;
5. 有金融行业、互联网行业大数据处理经验者优先。
有关大数据实训过程简介范文(推荐)三
第一章 总 则
第一条 为适应集团信息化发展要求,充分利用数据资源为生产、经营、管理和决策服务,保证各类信息合理、有序流动和信息安全,确保集团信息化建设快速协调有序安全发展,根据国家有关法律法规以及《集团信息安全管理办法》(中平„20xx‟188号)、等规定,特制定本管理办法。
第二条 本办法适用于集团各职能部室,直属和特设机构、专业化公司、事业部、区域公司及其所属各单位(以下简称各单位)。
第二章 管理范围
第三条 本办法管理范围包括:各单位与生产、经营、办公、安全等相关的应用系统和数据,以及为其提供支撑的基础设施资源、计算存储资源和办公终端资源等。
第三章 组织机构和工作机制
第四条 集团信息化领导小组是集团数据资源管理体系的最高层,负责审定集团有关数据资源管理的规章、制度、办法,负责审核有关标准、规范、重要需求等。集团信息化领导小组办公室(以下简称集团信息办)负责集团数据管理的监督、检查和考核,指导集团数据管理工作,查处危害集团数据安全的事件。各单位负责本单位数据的采集、传输、使用、安防、备份等管理
工作。中国平煤神马集团平顶山信息通信技术开发公司(以下简称信通公司)作为技术支撑及运维部门,负责集团数据中心的运维和运营工作。
第四章 数据分级管理
第五条 根据数据在生产、经营和管理中的重要性,结合有关保密规定,按照集团级应用系统和数据、厂矿级应用系统和数据、区队(车间)级应用系统和数据分别制定管理标准。
第六条 集团级应用系统和数据,技术管理由集团信息办负责,业务管理由相关业务处室负责,运维管理由信通公司负责。厂矿级应用系统和数据由各单位信息管理部门管理,集团需要利用的管理数据和生产数据要同步上传到集团数据中心。区队(车间)级应用系统和数据由各单位信息管理部门管理和维护。
第五章 数据标准管理
第七条 集团信息办负责集团数据编码和接口标准的统一规划和标准制定,负责对集团及各单位应用系统的数据标准管理进行引导和考核。各单位新建应用系统应严格执行集团下发的数据编码和接口标准,在用应用系统应根据自身实际逐步按照集团标准进行完善。
第八条 数据编码和接口标准应符合以下要求:
(一)数据编码应能够保证同一个对象编码的唯一性及上下游管理规范的一致性;
(二)接口应实现对外部系统的接入提供企业级的支持,在系统的高并发和大容量的基础上提供安全可靠的接入;
(三)提供完善的数据安全机制,以实现对数据的全面保护,保证系统的正常运行,防止大量访问,以及大量占用资源的情况发生,保证系统的健壮性;
(四)提供有效的系统可监控机制,使得接口的运行情况可监控,便于及时发现错误并排除故障;
(五)保证在充分利用系统资源的前提下,实现系统平滑的移植和扩展,同时在系统并发增加时提供系统资源的动态扩展,以保证系统的稳定性;
(六)在进行扩容、新业务扩展时,应能提供快速、方便和准确的实现方式。
第六章 数据资源管理
第九条 基础设施资源集中管理。为了避免信息机房等基础设施资源重复投资建设,造成资金浪费、设施利用率低等问题,各单位应充分利用集团数据中心资源,集团信息办负责统一协调集团及各单位的基础设施资源。
(一)各单位未经集团批准不得私自新建、改建、扩建信息机房。
(二)集团数据中心要按照《集团机房建设技术规范》建设,满足各单位应用系统及数据统一到集团数据中心所需的各项使用要求。
(三)各单位现有机房自行管理、统一管控。各级信息管理部门作为主要责任部门,要保证信息机房各项运行指标达到集团要求。
第十条 计算存储资源集中管理。为了消除“信息孤岛”,实现集团数据共享和集成,提升数据安全防护等级,各单位所需计算和存储资源,要统一使用集团数据中心的云计算资源,做到资源集中、高效利用。
(一)现有的集团级应用系统及数据(安全监测系统除外)、各单位应用系统及数据(直接用于生产安全、自动化控制和监测监控的系统除外)要按照在用服务器、存储的服务年限和系统生命周期科学制定迁移到集团数据中心的计划和方案,并报集团信息办批准后实施。
(二)新建应用系统原则上不再购臵新的服务器和存储,所需计算和存储资源应使用集团数据中心的云计算资源。各单位如有特殊生产要求,确需购臵服务器或存储的,需报请集团领导批准,由集团信息办备案后,按集团采购管理相关规定执行。
(三)对于当前集团网络不具备实施条件的单位,可向集团提出申请建设集团区域性数据分中心,并根据建设进度制定应用系统和数据迁移计划。集团区域性数据分中心建成后,新建系统需要集中部署、分级管理。
第十一条 办公终端资源集中管理。为了提高办公效率、降低办公成本、实现节能降耗,集团级应用系统要统一使用集团数据中心云桌面,并在厂矿和区队(车间)级应用系统中逐步实现全面使用。
(一)各单位新建系统所需计算机和新增办公用计算机要使用集团数据中心云桌面。
(二)原有集团推广的应用系统所使用的计算机,以及各单位在用的计算机,分别由应用系统主管部门和各单位按年度提出云桌面更换计划,逐步完成云桌面更换工作;集团信息办负责协调和监督。
(三)各单位申请云桌面使用,应与信通公司签订租用协议,由信通公司负责云桌面运维,各单位信息管理部门负责本单位云桌面管理。
(四)对于当前集团网络不具备实施云桌面替换条件的单位,应协同集团相关部门接入集团网络或建设集团区域性数据分中心。在网络接入后或集团区域性数据分中心建成后,按计划完成云桌面的部署工作。
第十二条 各单位使用资源应按集团规定支付相关费用。
第七章 数据分析管理
第十三条 数据分析是采取科学合理的方法,利用现代信息技术手段,对计算机应用系统生成的数据进行分析,充分发掘数据中蕴涵的信息,用数据描述现状,预测趋势,规范生产行为,优化管理流程,加强经营监管,提供决策支持。
第十四条 集团信息化领导小组应加强对各单位数据分析的指导,鼓励各单位结合自身实际,充分利用“大数据”技术,自行组织开发业务选题和数据模型,组织经验交流,提高分析水平。集团信息办要做好数据分析引导和管理工作,为集团安全生产、经营管理工作服务。基层各单位要充分挖掘和利用现有数据资源,不断探索和创新数据分析方法,规范数据分析程序,提高数据分析质量,做好本单位各项应用的数据
有关大数据实训过程简介范文(5篇)
声明:除非特别标注,否则均为本站原创文章,转载时请以链接形式注明文章出处。如若本站内容侵犯了原著者的合法权益,可联系本站删除。