8. 信息处理技术基础知识 8. 信息处理技术基础知识信息与信息技术信息信息的含义和作用信息与数据的关系信息的特征数据的基本加工小结信息化与信息社会信息化和信息社会信息化发展小结初等数学基础数据的简单统计数值平均数信息处理与信息处理实务信息处理及其过程信息处理及其过程信息处理的要求数据处理的方法信息处理实务数据属性数据分析工具的特点数据分析平台面向对象制造企业市场调研的目的信息意识选择题操作题比重17分0分11.4%信息与信息技术信息信息的含义和作用消息是信息的载体信息是包含在各种消息(语言、文字、图像、信号等)中的抽象量。信息是客观事物在其运动、演化以及相互作用等过程中所呈现的现象、属性、关系与规律等。信息不是事物本身是表示事物之间联系的消息、情报、指令、数据或信号。在人类社会中信息通常以行为、情感包括手势、眼神等和声、图、文、像、影等形式出现。信息与数据的关系数据是对客观事物记录下来的、可以鉴别的符号这些符号不仅指数字而且包括字符、文字、图形等。数据是信息的物理形式信息是数据的内容。数据本身没有意义只有经过解释才有意义才成为信息。数据是信息的载体信息是数据的内涵。信息有多种表现形式如手势、眼神、声音或图形等由于数据能够书写因而被记录、存储和处理并从中挖掘出更深层的信息因此数据是信息的最佳表现形式。信息的特征信息的价值取决于时效性但不一定随时间的推移而降低分类应用领域管理信息、社会信息、科技信息和军事信息层次性战略信息宏观信息、战术信息中观信息、操作信息微观信息数据的基本加工小结信息化与信息社会信息化和信息社会发展生产力劳动→知识产业信息产业融合、结合两化融合信息化工业化企业、社会信息化发展从产生的角度看信息化从“小”到“大”的5个层次是产品信息化、企业信息化、产业信息化、国民经济信息化和社会生活信息化。产品信息化。是信息化的基础。企业信息化。是指企业在产品的设计、生产、经营等环节中利用信息技术建设企业信息管理系统培养信息化人才等的过程。企业信息化是国民经济信息化的基础。产业信息化。指农业、工业、交通运输业、生产制造业、服务业等传统产业广泛利用信息技术来完成工艺、产品的信息化进一步提高生产力水平。国民经济信息化。实现统一的信息大流动使金融、贸易、投资等组成一个信息大系统。社会生活信息化。指包括商务、教育、政务、公共服务、交通、日常生活等在内的整个社会体系采用先进的信息技术。智慧城市、互联网金融等是社会生活信息化的体现和重要发展方向。不取代、不完全、不必须小结初等数学基础数据的简单统计数值平均数信息处理与信息处理实务信息处理及其过程信息处理及其过程信息加工的主要内容如下。信息的清洗和整理。收集得到的数据往往包含一些错误(内容错误、格式错误、时空错误)、重复数据还常有部分数据缺失以及数据不一致的情况。数据清洗就是把“脏”的数据“洗掉”,发现并纠正数据中可识别的错误还包括检查数据一致性、删除重复数据、处理无效值和缺失值、进一步审查异常数据等。同时还要将混乱的数据进行整理使其井井有条便于处理。数据清洗和整理的工作量较大但对于保证数据质量关系很大。信息的筛选和判别。在收集到的大量原始信息中不可避免地存在一些假信息只有通过认真地筛选和判别才能防止鱼目混珠、真假混杂。信息的分类和排序。收集来的信息是一种初始的、孤立的和零乱的信息只有把这些信息进行分类和排序使其有条不紊才能存储、检索、传递和使用。信息的分析和研究。对分类排序后的信息进行分析、比较、综合从而鉴别和判断出信息的价值达到去粗取精使原始信息升华、增值成为有用的信息并对信息进行分析、概括及研究计算使信息更具有使用价值为决策提供依据。信息的编制。将加工过的信息整理成易于理解和阅读的新材料并对这些材料进行编目和索引以供信息利用者提取和利用。信息存储是信息在时间上的传递。信息处理的要求及时、准确、适用、经济和安全数据处理的方法数据收集与分类数据编码与校验数据编码是指把需要加工处理的数据信息用特定的数字来表示的一种技术。具体来讲就是根据一定数据结构和目标的定性特征将数据转换为代码或编码字符在数据传输中表示数据的组成并作为传送、接受和处理的一组规则和约定。图形和图像的数字化表示方法一种称为点阵图像或位图图像简称图像Image另一种称为几何图形或矢量图形简称图形Graphics。常用的数据校验有重复校验多人同时输入数据再对比界限校验检查数据是否越界数据类型检验数据格式校验逻辑校验检查数据是否符合业务的逻辑性顺序校验和计数校验例如检查记录号是否缺失或重复平衡校验检查数据之间是否符合业务要求的平衡对照校验与计算机内已存储的表对照看是否存在该项等。数据清洗数据的存储和检索数据分析和可视化明确分析目的与框架就是明确项目的数据对象、商业目的和要解决的业务问题。基于商业的理解整理分析框架和分析思路。数据收集是按照确定的数据分析和框架内容有目的地收集、整合相关数据的一个过程它是数据分析的一个基础。数据处理是指对收集到的数据进行加工、整理以便开展数据分析它是数据分析前必不可少的阶段。数据处理主要包括数据清洗、数据转化等处理方法。数据分析是指通过分析手段、方法和技巧对准备好的数据进行探索、分析从中发现因果关系、内部联系和业务规律为项目目标提供决策参考。到了这个阶段要能驾驭数据、开展数据分析就要涉及工具和方法的使用。一是要熟悉常规数据分析方法二是熟悉数据分析工具。数据展现指通过图、表的方式来呈现数据分析的结果。借助于图形化手段能更直观、清晰、有效地传达与呈现信息、观点和建议。撰写数据分析报告是对整个数据分析成果的一个呈现。通过分析报告把数据分析的目的、过程、结果及方案完整呈现出来以为商业目的提供参考。大数据4V Volume(大量)、Velocity(高速)、Variety(多样)、Value (价值)信息处理实务数据属性业务属性数据的业务属性角度分类包括团体产品账户总账营销渠道申请事件风险模型人口统计地址和地理位置技术属性名称类数据业务描述类数据地址类数据ID标识类数据代码类数据金额类数据数值类数据数量类数据百分比类数据日期类数据管理属性数据分析工具的特点数据兼容性软件是否提供对其他常用数据格式的支持。例如办公软件是否支持常用的DOC、WPS等文件格式支持的程度如何即可否完全正确地读出这些格式的文件。软件兼容性主要考查两项内容一是软件运行需要哪些其他应用软件的支持二是判断与其他常用软件如MS OFFICE,反病毒软件一起使用是否造成其他软件运行错误或软件本身不能正确实现其功能。硬件兼容性考查软件对运行的硬件环境有无特殊说明如对计算机的型号网卡的型号、声卡的型号、显卡的型号等有无特别的声明有些软件可能在不同的硬件环境中出现不同的运行结果或是根本就不能执行。数据分析平台面向对象报表开发者业务人员数据分析师企业管理者管理制造企业市场调研的目的了解企业在市场上的地位分析市场发展趋势并进行预测为营销决策提供客观依据。收集数据或销售数据本身不是目的。制造企业也不会依靠销售数据来获得价值。信息意识清楚数据异常原因一般不给包含对数据的总数是否敏感