大数据领域专业词汇(大数据 专业术语)

随着大数据技术的不断完善和大数据应用的不断普及，大数据与各行各业的关系越来越密切。大数据行业充斥着大量的专业术语。准确掌握和理解这些术语的含义，有助于更好地理解大数据、更好地利用大数据技术。以下整理了以数据处理为中心的14个大数据专业术语。我们来看看吧~~~

本地数据库（LDB/LocalDatabase）

本地数据库是驻留在运行客户应用程序的计算机上的数据库。本地数据库位于本地磁盘或局域网上。典型的本地数据库包括Paradox、dbase、FoxPro和ACCCSS。

数据采集（DAQ）

数据采集又称数据采集，是通过各种传感器对测试对象的各种参数进行适当的转换，然后通过信号调理、采样、量化、编码、传输等步骤传输到控制器的过程。

数据采集的一般步骤：利用传感器感知各种物理量，并将其转换为电信号；通过A/D转换将模拟数据转换为数字数据；记录、打印或保存数据磁盘文件。生产厂家为采集系统编写的专用程序，常用于大型专用系统；固化采集程序，常用于小型专用系统；利用厂家提供的软件工具，用户编写自己的采集程序，主要用于组合配方系统。

数据模型

数据模型是现实世界数据特征的抽象，用于描述一组数据的概念和定义。数据模型是数据在数据库中存储的方式，是数据库系统的基础。在数据库中，数据的物理结构，也称为数据的存储结构，是数据元素在计算机内存中的表示和配置；数据的逻辑结构是指数据元素之间的逻辑关系，是用户或程序之间数据的表示。工作人员面前的呈现形式，数据的存储结构不一定与逻辑结构一致。

数据清理

数据整理是对调查、观察、实验等研究活动中收集到的数据进行检验、分类、编码和数值编码的过程，是数据统计分析的基础。

数据处理

数据处理是指对数据（包括数值和非数值）进行分析和处理的技术过程。即收集、存储、检索、处理、转换和传输数据，并将数据转换为信息的过程。

数据压缩

数据压缩是指在不丢失有用信息的情况下，减少数据量以减少数据存储空间，提高其传输、存储和处理效率，或按照一定算法重新组织数据，以减少数据冗余和存储空间的一种技术方法。

数据恢复

数据恢复是指利用技术手段抢救和恢复台式机硬盘、笔记本硬盘、服务器硬盘、移动硬盘、U盘等因各种原因损坏或丢失的数据的技术。

数据整合

数据集成就是将不同来源、不同格式、不同特征的数据在逻辑上或物理上有机地聚集起来，为企业提供全面的数据共享。数据集成保持数据源整体数据一致性，提高信息共享和利用效率。

数据迁移

数据迁移也称为分层存储管理，是一种离线存储和在线存储相结合的技术。采用高速、大容量离线存储设备作为磁盘设备的下级设备，按照指定策略自动将磁盘中常用数据迁移到磁带库等辅助容量存储设备上。当需要使用数据时，分层存储系统会自动将数据从下层存储设备传输回上层磁盘。

数据冗余

数据冗余是指相同的数据在系统中出现多次。消除数据冗余的目的是避免更新过程中可能出现的问题，以保持数据的一致性。

数据提取

数据抽取是指从源数据源系统中抽取目标数据源系统所需数据的过程。

网络数据挖掘

Web数据挖掘是指从网络中获取大量有价值的数字信息。主要包括结构化数据提取（StructuredDataExtraction）、信息集成（InformationIntegration）和观点挖掘（OpinionMining）等。

结构化数据提取的目标是从网页中提取结构化数据。这些结构化数据往往存储在后台数据库中，并由网页承载并以一定的格式展示给用户。例如，论坛列表页面、博客页面、搜索引擎结果页面等。信息集成是针对结构化数据的，其目标是将从不同网站提取的数据统一并集成到数据库中。关键问题是如何从不同网站的数据表中找出具有相同含义的数据并统一存储。

数据标准化

数据标准化是指研究、制定和推广应用统一的数据分类、记录格式、转换和编码技术标准的过程。

数据备份

数据备份是灾难恢复的基础。为了防止系统中因操作错误或系统故障而导致数据丢失，将全部或部分数据集从原始存储地点复制到其他地方的活动最大限度地减少了数据损坏的程度。传统的数据备份主要采用内置或外置磁带机进行冷备份。这种方法只能防止操作失误等人为故障，而且恢复时间也很长。现代企业采用网络备份，通过专业的数据存储管理软件结合相应的硬件和存储设备来实现备份。

完整备份。优点是当发生数据丢失灾难时，可以快速恢复丢失的数据。缺点是每天对整个系统进行完全备份，导致备份数据大量重复。增量备份。先进行全量备份，后续周期只备份当天或修改过的数据。优点：节省磁盘空间，缩短备份时间；缺点是数据恢复麻烦，备份可靠性很差。差异备份。先进行全量备份，然后将与当天备份不同的所有数据（新的或修改的）备份到磁盘。该策略避免了上述两种策略的缺点，并具有其全部优点。首先，它不需要每天对系统进行完整的备份，所需的备份时间短，节省磁盘空间。其次，数据恢复方便。一旦出现问题，用户只需使用全量备份和问题发生前一天的备份即可恢复系统。智品汇是国内领先的职场大数据征信服务商。

智品汇产品体系

智品汇背景调查操作流程

智品汇的愿景是“让世界远离欺骗”。通过完善职场各方数据，为我国9.2亿从业人员建立职场诚信体系，彻底解决职场诚信问题。

http://weixin.qq.com/r/jjkbAzPEDm5xrXdg92yc（自动识别二维码）