GB/T32630-2016
非结构化数据管理系统技术要求
Technicalrequirementsforunstructureddatamanagementsystem
- 中国标准分类号（CCS）L67
- 国际标准分类号（ICS）35.240.70
- 实施日期2016-11-01
- 文件格式PDF
- 文本页数10页
- 文件大小299.14KB
以图片形式预览非结构化数据管理系统技术要求
非结构化数据管理系统技术要求
国家标准 GB/T32630一2016 非结构化数据管理系统技术要求 Iechniealrequirementsforunstrctureddatamanagementsystem 2016-04-25发布 2016-11-01实施 国家质量监督检验检疫总局 发布 国家标准化管理委员会国家标准
GB/T32630一2016 前 言 本标准按照GB/T1.1一2009给出的规则起草
请注意本文件的某些内容可能涉及专利
本文件的发布机构不承担识别这些专利的责任 本标准由全国信息技术标准化技术委员会(SAC/TC28)提出并归口
本标准起草单位:浙江大学、电子技术标准化研究院、清华大学、人民大学、北京航空航天 大学
本标准主要起草人:庄越挺、陈岭,那健、孙建伶,高林,吴新松、刘贤刚、李莹、卫风林、王建民、 王朝坤、陈俊、杜小勇,陈晋川马殿富、郎波
GB/T32630一2016 非结构化数据管理系统技术要求 范围 本标准规定了非结构化数据管理系统的功能性要求和质量要求
本标准适用于非结构化数据管理系统产品的研制、开发和测试
符合性 对于非结构化数据管理系统是否符合本标准的规定如下 a非结构化数据管理系统若满足本标准基本要求中的所有要求,则称其满足本标准的基本要求 b)非结构化数据管理系统在满足所有基本要求的前提下,若满足某部分扩展要求,则称其满足本 标准的基本要求和该部分扩展要求 非结构化数据管理系统若满足本标准基本要求和扩展要求中的所有要求,则称其满足本标准 的所有要求
规范性引用文件 下列文件对于本文件的应用是必不可少的
凡是注日期的引用文件,仅注日期的版本适用于本文 件
凡是不注日期的引用文件,其最新版本(包括所有的修改单)适用于本文件
信息技术中文编码学符集 GB180302005 GB/T32908一2016非结构化数据访问接口规范 术语和定义 下列术语和定义适用于本文件
非结构化数据unstructureddata 没有明确结构约束的数据,如文本、图像、音频、视频等
非结构化数据管理系统unstruetureldata mmanagemmentsystem 对非结构化数据进行管理、操作的大型基础软件,提供非结构化数据存储、特征抽取,索引,查询等 管理功能
缩略语 下列缩略语适用于本文件
verseDocumentFrec IDF:逆向文件频率(Inv equency Coefficient) MFCC;梅尔频率倒谱系数(MelFrequeneyCepstrum PB;千万亿字节(PetaByte)
GB/T32630一2016 cale-invariantFeatureTransform SIFT:尺度不变特征转换(Scal TF;词频(TermmFrequeney) 功能性要求 总体要求 6.1 非结构化数据管理系统的总体要求如下 a)应包括存储与计算设施、存储管理、特征抽取、索引管理、查询处理、访问接口、管理工具七个基 本组成部分 宜包括转换加载、分析挖掘,可视展现三个扩展组成部分
存储与计算设施 6.2 6.2.1基本要求 存储与计算设施基本要求如下 应支持磁盘、磁盘阵列、内存存储,键值存储,关系型存储,分布式文件系统等一种或多种存储 a 设施; 应支持单机、并行计算集群,分布式计算集群等一种或多种计算设施
b 6.2.2扩展要求 无
6.3存储管理 6.3.1基本要求 存储管理基本要求如下 a 应提供涵盖原始数据,基本属性、底层特征,语义特征的概念层存储建模功能 b应提供逻辑层的存储建模功能; 支持整型,浮点型,布尔型,、字符事,日期.,日期时间、二进制块等基本数据类型， 支持向量、矩阵,关联等数据类型; 应支持根据建好的逻辑层存储模型创建存储实例 应支持在创建好的存储实例上插人、修改,删除非结构化数据; 应支持删除存储实例 应支持非结构化数据操作的原子性
6.3.2扩展要求 存储管理扩展要求如下 应支持全局事务的定义并保证事务的原子性、一致性、隔离性和持久性 a b)应支持数据类型的多值结构和层次结构 应支持在不同的存储设施上创建存储实例并实现自动映射; d)应支持PB级数据存储
GB/T32630一2016 6.4特征抽取 6.4.1基本要求 6.4.1.1特征抽取总体要求 特征抽取基本要求的总体要求如下: a)应支持从非结构化数据中抽取名称,类型,创建者和创建时间等基本属性; b应支持文本、图像、音频、视频中至少一种非结构化数据特征的抽取 6.4.1.2文本特征抽取 文本特征抽取基本要求如下 a)应支持从文本中抽取词; 应支持从文本中抽取停用词; b e)应支持从文本中抽取TF-IDF特征 d)应支持从文本中抽取关键词
图像特征抽取 6.4.1.3 图像特征抽取基本要求如下 a)应支持从图像中抽取颜色空间、主导颜色、色彩内容,颜色结构、颜色布局等颜色特征; b应支持从图像中抽取均匀纹理边缘直方图等纹理特征 应支持从图像中抽取区域形状、轮廓形状等形状特征
c 6.4.1.4音频特征抽取 音频特征抽取基本要求如下 应支持从音频中按静音抽取片段; b应支持从音频中抽取音频波谱特征; 应支持从音频中抽取MFcC特征
6.4.1.5视频特征抽取 视频特征抽取基本要求如下 a)应支持从视频中按镜头抽取片段; b应支持从视频中抽取关键倾
6.4.2扩展要求 6.4.2.1特征抽取总体要求 应支持文本,图像、音频、视频中两种及以上非结构化数据特征的抽取
6.4.2.2文本特征抽取 文本特征抽取扩展要求如下 应支持从文本中抽取人名、地名、机构名、时间等内容" a b)应支持从文本中抽取主题词; 应支持从文本中抽取摘要; c
GB/T32630一2016 d)应支持从文本中抽取语义特征
6.4.2.3 图像特征抽取 图像特征抽取扩展要求如下: 应支持从图像中抽取SIFT局部区域描述特征; a b)应支持从图像中抽取语义特征
6.4.2.4音频特征抽取 音频特征抽取扩展要求如下 a应支持从音频中抽取音频指纹特征; b)应支持从音频中抽取旋律特征; 应支持从音频中抽取音色和响度特征; c d应支持从音频中抽取语义特征
6.4.2.5视频特征抽取 视频特征抽取扩展要求如下 a)应支持从视频中抽取运动特征; b 应支持从视频中抽取语义特征 6.5索引管理 6.5.1基本要求 应提供索引建立、维护和删除功能 6.5.2扩展要求 索引管理扩展要求如下 a)应支持B十树索引倒排索引,全文索引和高维索引多种索引类型; 应支持PB级数据索引
b 6.6查询处理 6.6.1基本要求 查询处理基本要求如下: 应支持范围查询,全文查询、样例查询,语义查询和跨媒体查询多种查询方式; a b应提供查询结果排序和批量返回功能 6.6.2扩展要求 查询处理扩展要求如下 a)应提供查询相关性反馈功能 应支持PB级数据查询 b 访问接口 6.7.1基本要求 访问接口基本要求如下
GB/T32630一2016 应依从GB/T329082016中第4章规定的查询语言访问接口要求; a b)应依从GB/T32908一2016中第5章规定的应用程序访问接口要求 6.7.2扩展要求 应依从GB/T32908一2016中第6章规定的web服务访问接口要求
6.8管理工具 6.8.1基本要求 管理工具基本要求如下 应提供安装部署工具; a b)应提供逻辑层模型定义工具; 应提供查询分析工具 c) 6.8.2扩展要求 应提供任务管理工具
6.9转换加载 6.9.1基本要求 转换加载基本要求如下 a)应支持常用格式的文本数据转换加载; b) 应支持常用格式的图像数据转换加载， e)应支持常用格式的音频数据转换加载; 应支持常用格式的视频数据转换加载
d 6.9.2扩展要求 应提供面向医疗、工业控制金融等特定应用领域的非结构化数据转换加载工具集
6.10分析挖掘 6.10.1基本要求 分析挖掘基本要求如下: a)应支持分析模型定义; 应支持分析模型执行; b e)应支持挖掘模型定义; d)应支持挖掘模型执行
6.10.2扩展要求 应提供数据挖掘工具集
6.11 可视展现 6.11.1基本要求 可视展现基本要求如下
GB/T32630一2016 应支持文本数据展现 a b 应支持图像数据展现 c 应支持音频数据展现; d)应支持视频数据展现; 应提供柱状图可视化方法; e 应提供折线图可视化方法 应提供饼图可视化方法
g 6.11.2扩展要求 可视展现扩展要求如下 a)应提供标签云可视化方法; 应提供关系图可视化方法; D 应提供基于地图的可视化方法
6.12统计信息 6.12.1时间统计信息 6.12.1.1基本要求 应提供系统平均数据插人时间的统计信息
6.12.1.2扩展要求 应提供系统平均查询响应时间的统计信息
6.12.2容量统计信息 6.12.2.1基本要求 应提供系统可支持的数据量的统计信息
6.12.2.2扩展要求 应提供系统可支持的并发用户数的统计信息
质量要求 7.1 信息安全性 7.1.1基本要求 信息安全性基本要求如下 a)应支持创建、删除用户; 应支持用户设置密码; b e应支持创建、删除角色 d)应支持用户角色的授予、收回,查看; 应提供权限体系 应支持用户和角色权限的授予,收回,查看; g)应支持数据加密
GB/T32630一2016 7.1.2扩展要求 应支持用户审计
7.2易用性 7.2.1基本要求 易用性基本要求如下 应提供完整的用户手册; a b)应提供联机帮助; e)应提供图形化管理界面; d)应提供模型定义和数据操作的交互工具
7.2.2扩展要求 应提供向导工具
7.3维护性 7.3.1基本要求 维护性基本要求如下 a)应支持非结构化数据的导人与导出 应支持数据多副本; b 应支持日志机制; c) 应支持存储实例的备份与恢复 d 应提供故障恢复工具
a 7.3.2扩展要求 应支持系统模块的热插拔
7.4兼容性 7.4.1基本要求 兼容性基本要求如下: a)应支持多种操作系统运行环境; 应支持GB180302005的强制部分; b 应支持C+十或Java主流编程语言
7.4.2扩展要求 无
非结构化数据管理系统技术要求GB/T32630-2016
概述
非结构化数据管理系统是一种用于管理非结构化数据（如文本、音频、图像、视频等）的软件系统，它可以帮助用户更好地组织、存储、检索和分析非结构化数据，从而提高数据的价值和利用率。GB/T32630-2016 是中国国家标准化管理委员会发布的非结构化数据管理系统技术要求标准，该标准旨在统一非结构化数据管理系统的技术要求，促进行业发展。
主要内容和标准
GB/T32630-2016 标准主要包括以下内容和标准：
- 术语和定义；
- 基本原则和要求，包括数据安全性、可扩展性、性能等；
- 系统结构和功能，包括数据采集、存储、检索、分析等；
- 数据管理和处理，包括数据清洗、抽取、转换、加载等；
- 应用程序接口（API）和开发工具；
- 性能评估和测试方法；
- 质量保证和控制。
重要意义
非结构化数据管理系统技术要求GB/T32630-2016 对于促进非结构化数据管理系统的发展和规范具有重要意义。该标准对非结构化数据管理系统的基本原则和要求进行了详细定义，可以帮助开发人员更好地设计和实现非结构化数据管理系统，并提高其安全性、可扩展性和性能等方面的表现。此外，该标准还规定了系统结构和功能、数据管理和处理、API 和开发工具等方面的技术要求，为行业内企业间的协同和交流奠定了良好的基础。
总结
非结构化数据管理系统技术要求GB/T32630-2016 对于规范非结构化数据管理系统的设计和实现具有重要作用。该标准详细定义了非结构化数据管理系统的基本原则和要求，以及系统结构和功能、数据管理和处理、API 和开发工具等方面的技术要求，为行业内企业间的协同和交流提供了依据，有助于促进非结构化数据管理系统的发展和推广。
