数字化工程师技能考试内容

1.计算机系统知识 硬件知识计算机体系结构和主要部件的基本工作原理·CPU和存储器的组成、性能、基本工作原理·常用I/O设备、通信设备的性能，以及基本工作原理·I/O接口的功能、类型和特点·CISC/RISC，流水线操作，多处理机，并行处理存储系统·虚拟存储器基本工作原理，多级存储体系·RAID类型和特性 安全性、可靠性与系统性能评测基础知识·诊断与容错·系统可靠性分析评价·计算机系统性能评测方法数据结构与算法 常用数据结构·数组（静态数组、动态数组）·线性表、链表（单向链表、双向链表、循环链表）·栈和队列·树（二叉树、查找树、平衡树、遍历树、堆）、图、集合的定义、存储和操作·Hash（存储位置计算、碰撞处理） 常用算法·排序算法、查找算法、数值计算、字符串处理、数据压缩算法、递归算法、图的相关算法·算法与数据结构的关系，算法效率，算法设计，算法描述（流程图、伪代码、决策表），算法的复杂性软件知识操作系统知识·操作系统的类型、特征、地位、内核（中断控制）、进程、线程概念·处理机管理（状态转换、同步与互斥、信号灯、分时轮转、抢占、死锁）·存储管理（主存保护、动态连接分配、分段、分页、虚存）·设备管理（I/O控制、假脱机、磁盘调度）·文件管理（文件目录、文件的结构和组织、存取方法、存取控制、恢复处理、共享和安全）·作业管理（作业调度、作业控制语言（JCL）、多道程序设计）·汉字处理，多媒体处理，人机界面·网络操作系统和嵌入式操作系统基础知识·操作系统的配置程序设计语言和语言处理程序的知识· 汇编、编译、解释系统的基础知识和基本工作原理·程序设计语言的基本成分：数据、运算、控制和传输，程序调用的实现机制· 各类程序设计语言的主要特点和适用情况 计算机网络知识·网络体系结构（网络拓扑、OSI/RM、基本的网络协议）·传输介质，传输技术，传输方法，传输控制·常用网络设备和各类通信设备·Client/Server结构、Browser/Server结构、Browser/Web/Datebase结构·LAN拓扑，存取控制，LAN的组网，LAN间连接，LAN-WAN连接·因特网基础知识及应用·网络软件·网络管理·网络性能分析·网络有关的法律、法规2.数据库技术 数据库技术基础数据库模型·数据库系统的三级模式（概念模式、外模式、内模式），两级映像（概念模式/外模式、外模式/内模式）·数据库模型：数据模型的组成要素，概念数据模型ER图（实体、属性、关系），逻辑数据模型（关系模型、层s次模型、网络模型）数据库管理系统的功能和特征·主要功能（数据库定义、数据库操作、数据库控制、事务管理、用户视图）·特征（确保数据独立性、数据库存取、同时执行过程、排它控制、故障恢复、安全性、完整性）·RDB（关系数据库），OODB（面向对象数据库），ORDB（对象关系数据库），NDB（网状数据库）·几种常用Web数据库的特点 数据库系统体系结构· 集中式数据库系统· Client/Server数据库系统·并行数据库系统·分布式数据库系统· 对象关系数据库系统 数据操作 关系运算·关系代数运算（并、交、差、笛卡儿积、选择、投影、连接、除）·元组演算·完整性约束 关系数据库标准语言（SQL）·SQL的功能与特点·用SQL进行数据定义（表、视图、索引、约束）·用SQL进行数据操作（数据检索、数据插入/删除/更新、触发控制）·安全性和授权·程序中的API，嵌入 数据库的控制功能·数据库事务管理（ACID属性）·数据库备份与恢复技术（UNDO、REDO）·并发控制数据库设计基础理论 关系数据库设计·函数依赖·规范化（第一范式、第二范式、第三范式、BC范式、第四范式、第五范式）·模式分解及分解应遵循的原则 对象关系数据库设计·嵌套关系、 复杂类型，继承与引用类型·与复杂类型有关的查询·SQL中的函数与过程·对象关系 数据挖掘和数据仓库基础知识·数据挖掘应用和分类·关联规则、聚类·数据仓库的成分·数据仓库的模式 多媒体基本知识 多媒体技术基本概念·多媒体系统基础知识·常用多媒体文件格式 多媒体压缩编码技术·多媒体压缩编码技术·统计编码·预测编码·编码的国际标准多媒体技术应用·简单图形的绘制，图像文件的处理方法·音频和视频信息的应用·多媒体应用开发过程 系统性能知识·性能计算（响应时间、吞吐量、周转时间）·性能指标和性能设计·性能测试和性能评估 计算机应用基础知识·信息管理、数据处理、辅助设计、科学计算，人工智能等基础知识·远程通信服务及相关通信协议基础知识3. 系统开发和运行维护知识软件工程、软件过程改进和软件开发项目管理知识·软件工程知识·软件开发生命周期阶段目标和任务·软件开发项目基础知识（时间管理、成本管理、质量管理、人力资源管理、风险管理等）及其常用管理工具·主要的软件开发方法（生命周期法、原型法、面向对象法、CASE）·软件开发工具与环境知识·软件质量管理基础知识·软件过程改进基础知识·软件开发过程评估、软件能力成熟度评估的基础知识 系统分析基础知识·系统分析的目的和任务·结构化分析方法（数据流图（DFD）和数据字典（DD），实体关系图（ERD），描述加工处理的结构化语言）·统一建模语言（UML）·系统规格说明书系统设计知识·系统设计的目的和任务·结构化设计方法和工具（系统流程图、HIPO图、控制流程图）·系统总体结构设计（总体布局，设计原则，模块结构设计，数据存取设计，系统配置方案）·系统详细设计（代码设计、数据库设计、用户界面设计、处理过程设计）·系统设计说明书系统实施知识·系统实施的主要任务·结构化程序设计、面向对象程序设计、可视化程序设计·程序设计语言的选择、程序设计风格·系统测试的目的、类型，系统测试方法（黑盒测试、白盒测试、灰盒测试）·测试设计和管理（错误曲线、错误排除、收敛、注入故障、测试试用例设计、系统测试报告）·系统转换基础知识 系统运行和维护知识·系统运行管理知识·系统维护知识·系统评价知识4. 安全性知识·安全性基本概念（网络安全、操作系统安全、数据库安全）·计算机病毒的防治，计算机犯罪的防范，容灾·访问控制、防闯入、安全管理措施·加密与解密机制·风险分析、风险类型、抗风险措施和内部控制5.标准化知识·标准化意识，标准化的发展，标准出台过程·国际标准、国家标准、行业标准、企业标准基本知识·代码标准、文件格式标准、安全标准软件开发规范和文档标准·标准化机构6.信息化基础知识·信息化意识·全球信息化趋势、国家信息化战略、企业信息化战略和策略·有关的法律、法规·远程教育、电子商务、电子政务等基础知识·企业信息资源管理基础知识7.计算机专业英语·掌握计算机技术的基本词汇·能正确阅读和理解计算机领域的英文资料 1.数据库设计 理解系统需求说明·了解用户需求、确定系统范围·确定应用系统数据库的各种关系·现有环境与新系统环境的关系·新系统中的数据项、数据字典、数据流 系统开发的准备·选择开发方法，准备开发环境，制订开发计划 设计系统功能·选择系统机构，设计各子系统的功能和接口，设计安全性策略、需求和实现方法，制定详细的工作流和数据流数据库设计 设计数据模型·概念结构设计（设计ER模型）·逻辑结构设计（转换成DBMS所能接收的数据模型）·评审设计 物理结构设计·设计方法与内容·存取方法的选择·评审设计与性能预测 数据库实施与维护·数据加载与应用程序调试·数据库试运行·数据库运行与维护 数据库的保护·数据库的备份与恢复·数据库的安全性·数据库的完整性·数据库的并发控制 编写外部设计文档·编写系统说明书（系统配置图、各子系统关系图、系统流程图，系统功能说明、输入输出规格说明、数据规格说明、用户手册框架）·设计系统测试要求 设计评审2.数据库应用系统设计 设计数据库应用系统结构·信息系统的架构（如Client/Server）与DBMS·多用户数据库环境（文件服务器体系结构、Client/Server体系结构）·大规模数据库和并行计算机体系结构（SMP、MPP）·中间件角色和相关工具·按构件分解，确定构件功能规格以及构件之间的接口 设计输入输出·屏幕界面设计，设计输入输出检查方法和检查信息·数据库交互与连接（掌握C程序设计语言，以及Java、Visual Basic、Visual C++、PowerBuilder、Delphi中任一种开发工具与数据库互连的方法（如何与数据库服务器沟通）） 设计物理数据·分析事务在数据库上运行的频率和性能要求，确定逻辑数据组织方式、存储介质，设计索引结构和处理方式·将逻辑数据结构变换成物理数据结构，计算容量（空间代价），确定存取方法（时间效率）、系统配置（维护代价）并进行优化 设计安全体系·明确安全等级·数据库的登录方式·数据库访问·许可（对象许可、命令许可、授权许可的方法）应用程序开发 应用程序开发·选择应用程序开发平台·系统实施顺序·框架开发·基础小组的程序开发·源代码控制·版本控制 模块划分（原则、方法、标准） 编写程序设计文档·模块规格说明书（功能和接口说明、程序处理逻辑的描述、输入输出数据格式的描述）·测试要求说明书（测试类型和目标，测试用例，测试方法） 程序设计评审 编写应用系统设计文档·系统配置说明、构件划分图、构件间的接口、构件处理说明、屏幕设计文档、报表设计文档、程序设计文档、文件设计文档、数据库设计文档 设计评审3. 数据库应用系统实施 整个系统的配置与管理 常用数据库管理系统的应用（SQL Server、Oracle、Sybase、DB2、Access或Visual Foxpro）·创建数据库·创建表、创建索引、创建视图、创建约束、创建UDDT（用户自定义类型）·创建和管理触发器·建立安全体系 数据库应用系统安装·拟定系统安装计划（考虑费用、客户关系、雇员关系、后勤关系和风险等因素）·拟定人力资源使用计划（组织机构安排的合理性）·直接安装（安装新系统并使系统快速进入运行状态）·并行安装（新旧系统并行运行一段时间）·阶段安装（经过一系列的步骤和阶段使新系统各部分逐步投入运行） 数据库应用系统测试·拟定测试目标、计划、方法与步骤·数据加载，准备测试数据·指导应用程序员进行模块测试进行验收·准备系统集成测试环境测试工具·写出数据库运行测试报告 培训与用户支持4.数据库系统的运行和管理 数据库系统的运行计划·运行策略的确定·确定数据库系统报警对象和报警方式·数据库系统的管理计划（执行，故障/恢复，安全性，完整性，用户培训和维护） 数据库系统的运行和维护·新旧系统的转换·收集和分析报警数据（执行报警、故障报警、安全报警）·连续稳定的运行·数据库维护（数据库重构、安全视图的评价和验证、文档维护）·数据库系统的运行统计（收集、分析、提出改进措施）·关于运行标准和标准改进一致性的建议·数据库系统的审计 数据库管理·数据字典和数据仓库的管理·数据完整性维护和管理（实体完整性、参照完整性）·数据库物理结构的管理（保证数据不推迟访问）·数据库空间及碎片管理·备份和恢复（顺序、日志（审计痕迹）、检查点）·死锁管理（集中式、分布式）·并发控制（可串行性、锁机制、时间戳、优化）·数据安全性管理（加密、安全、访问控制、视图、有效性确认规则）·数据库管理员（DBA）职责 性能调整·SQL语句的编码检验·表设计的评价·索引的改进·物理分配的改进·设备增强·数据库性能优化 用户支持·用户培训·售后服务5. 数据库语言·数据库语言的要素·数据库语言的使用方式（交互式和嵌入式） SQL概述·SQL语句的特征·SQL语句的基本成分 数据库定义·创建数据库（Create Datebase）、创建表（Create Table）·定义数据完整性·修改表（Alter Table）、删除表（Drop Table）·定义索引（Create Index）、删除索引（Drop Index）·定义视图（Create View）、删除视图（Drop View）、更新视图 数据操作·Select语句的基本机构·简单查询·SQL中的选择、投影·字符串比较，涉及空值的比较·日期时间，布尔值，输出排序·多表查询·避免属性歧义·SQL中的连接、并、交、差·SQL中的元组变量·子查询完整性控制与安全机制·主键（Primary Key）约束·外键（Foreign Key）约束·属性值上的约束（Null、Check、Create Domain）·全局约束（Create Assertions）·权限、授权（Grant）、销权（Revoke） 创建触发器（Create Trigger） SQL使用方式·交互式SQL·嵌入式SQL·SQL与宿主语言接口（Declare、共享变量、游标、卷游标）·动态SQL· SQL 标准化6. 网络环境下的数据库分布式数据库 分布式数据库的概念·分布式数据库的特点与目标 分布式数据库的体系结构·分布式数据库的模式结构·数据分布的策略（数据分片、分布透明性）·分布式数据库管理系统分布式查询处理和优化分布式事务管理·分布式数据库的恢复（故障、恢复、2段提交、3段提交）·分布式数据库的透明性（局部、分裂、复制、处理、并发、执行）分布式数据库系统的应用 网络环境下数据库系统的设计与实施·数据的分布设计·负载均衡设计·数据库互连技术 面向Web的DBMS技术·三层体系结构·动态Web网页·ASP、JSP、XML的应用7.数据库的安全性 安全性策略的理解·数据库视图的安全性策略·数据的安全级别（最重要的、重要的、注意、选择）数据库安全测量·用户访问控制（采用口令等）·程序访问控制（包含在程序中的SQL命令限制）·表的访问控制（视图机制）·控制访问的函数和操作·外部存储数据的加密与解密8. 数据库发展趋势与新技术面向对象数据库（OODBMS） OODBMS的特征 面向对象数据模型·对象结构、对象类、继承与多重继承、对象标识、对象包含、对象嵌套面向对象数据库语言 对象关系数据库系统（ORDBMS）·嵌套关系·复杂类型·继承、引用类型·与复杂类型有关的查询·函数与过程·面向对象与对象关系·ORDBMS应用领域企业资源计划（ERP）和数据库 ERP概述·基本MRP（制造资源计划）、闭环MRP、ERP·基本原理、发展趋势·ERP设计的总体思路（一个中心、两类业务、三条干线） ERP与数据库·运行数据库与ERP数据模型之间的关系·运行数据库与ERP数据库之间的关系 案例分析决策支持系统的建立·决策支持系统的概念·数据仓库设计·数据转移技术·联机分析处理（OLAP）技术·企业决策支持解决方案·联机事务处理（OLTP）

一、认识大数据大数据本质其实也是数据，不过也包括了些新的特征，数据来源广;数据格式多样化(结构化数据、非结构化数据、Excel文件等);数据量大(最少也是TB级别的、甚至可能是PB级别);数据增长速度快。二、大数据所需技能要求Python语言：编写一些脚本时会用到。Scala语言：编写Spark程序的最佳语言，当然也可以选择用Python。Ozzie，azkaban：定时任务调度的工具。Hue，Zepplin：图形化任务执行管理，结果查看工具。Allluxio，Kylin等：通过对存储的数据进行预处理，加快运算速度的工具。必须掌握的技能：、 HBase(、 Kafka、Storm/JStorm、Scala、Python、Spark (Core+sparksql+Spark streaming ) 、辅助小工具(Sqoop/Flume/Oozie/Hue等)。