标准规范下载简介

LS／T 1820-2018 粮食大数据资源池设计规范

粮食大数据资源池应汇集粮食生产、收购、仓储、加工、销售等过程中的各种相关数据，与粮食有关 的宏观经济数据、管理数据，以及互联网公众奥情等数据。资源池中应包含但不限于6.2～6.10所规定 的数据类别。 资源池中的数据既包含结构化数据，也包含非结构化数据，如文本、图片、音视频等，资源池应支持 上述数据的存储与管理，并针对未来可能产生的新型粮食 数据提供足够的扩展能力

6.2.2田间环境数据

田间种植环节的环境参数，如水（高度、水质）、空气（温度、湿度、CO2浓度、光照）、土壤（湿度、 数据。

DB35／T 1797-2018 公路工程建设项目文件信息化管理规范6.2.3产量统计数据

粮食补贴数据、粮食收购主体构成、粮食收购数量、质量、收购进度、检验结果、收购凭证、国有企业 收购量、政策性粮食收购量等执行情况信息，以及LS/T1713一2015中D.4关联信息表所包含的收购 信息数据。

LS/T1802中粮食仓储业务数据元分类表中的基本信息数据

LS/T1802中粮食仓储业务数据元分类表中的基本信息数据，

6.4.2粮食出入库数据

6.4.3仓储作业数据

降水时间、方法，熏蒸时间 湿度、水分、氧气、二氧化碳、磷化氢 虫及螨类等信息，以及LS/ 元所包含的数据。

6.4.4粮情测控数据

LS/T1802中粮情检测数据元所包含的数据，以及GB/T26882.1中规定的粮情测控系统设备 记录。

6.4.5 仓储账目数据

中涉及的账目数据，包括：账本、统计报表、统计台账、原 始凭证、粮库保管账、统计表、会计购 等数推

6.4.6仓储视频数据

粮仓视频监控系统产生的视频数据

粮仓视频监控系统产生的视频数据

加工企业信息，加工生产线编码、名称、加工产品名称，产品规格，加工数量，加工时间，检测时间， 论，检验员，产品生产日期等数据，以及LS/T1708.2所包含的加工指标的完成情况数据，

6.6.1粮食市场数据

粮食销售总量、国有企业销售量、政策性粮食竞价交易数据、终端市场价格、主要粮食制品价格等 数据。

6.6.2粮食消费信息

6.6.3粮食贸易数据

粮食的出发地、目的地，运输过程中的车辆轨迹，运输过程中粮食存放环境、时间，操作人员，通 D出入库系统检测的粮食货位号、运输工具编号、吨粮袋号、地磅计量信息等数据

6.8.1宏观统计数据

产量大县、粮食质量指标、人口总数、地区产值、地区财政收人、城镇居民人均可支配收入、农民人均 纯收入等基本信息。

6.8.2粮食库存数据

国有及非国有粮食经营企业库存、粮食 、城镇居民存粮等数据，

6.8.3国际市场数据

6.8.4宏观调控信息

6.9.1涉粮企业信息

全国粮食仓储企业、粮食加工企业等信息

6.9.2行政许可业务管理信息

粮食收购资格许可、储备粮承储资格许可

6.9.3粮食财务数据

LS/T1711中所包含的粮食财务会计数据

粮食大数据资源池中的数据应通过元数据对其组织结构、管理信息、访问信息等内容进行描述。 元数据的描述对象为数据集，描述内容参见7.2，应包含数据集描述信息、数据集分发与服务信息 结构描述信息3个必选模块，以及范围信息、联系信息2个可选辅助模块。 元数据元素的属性参见7.3，应包含中文名称、英文名称、标识、定义、类型、值域、可选性、最大出现 饮数、注释等9个属性。

7.2.1数据集描述信息

数据集描述信息模块为必选模 联系信息”两个辅助模块中的内容， 数据集描述信息模块应记录数据集的基本信息

对数据集本身的基本属性信息进行详细描述，例如数据集名称、分类、创建者、摘要、来源、所采用的语言 等，数据集用户能够通过浏览这些描述信息对数据集形成一个总体了解。 数据集描述信息包含的元数据元素见附录A的A.1。

7.2.2数据集分发与服务信息

数据集分发与服务信息为必选模块，可引用“联系信息”辅助模块中的内容。 数据集分发与服务信息模块应记录与数据集发行、获取及提供服务有关的信息，主要包括数据格 式、使用数据集的技术要求、收费策略、权限声明、订购指南、联系信息等内容。数据集分发与服务信息 模块还应记录与数据集相关的服务的标识信息，以及详细的服务元数据信息，该模块用于在数据集与相 关服务之间建立连接。 数据集分发与服务信息包含的元数据元素见A.2。

7.2.3结构描述信息

结构描述信息为必选模块。 结构描述信息模块应记录数据集所包含实体的结构的有关信息，包括实体基本信息、属性信息、约 束条件等内容。实体结构信息可包括关系型数据库中的数据表及其属性信息，以及数据字典中的信息。 对于不通过关系型数据库管理，但具备关系数据库表格类似特征的实体，也可通过此模块来描述，例如 具有明确字段或键的文档数据库和文本文件等。 结构描述信息包含的元数据元素见A.3。

范围信息模块应记录数据集内容所涉及的分类、时间和空间范围的信息 范围信息包含的元数据元素见A.4。

联系信息为辅助模块，不得单独使用，而应被必选模块的有关元素引用。 联系信息模块应记录与数据集有关的个人和组织的联系信息。 联系信息包含的元数据元素见A.5。

数据获取接口主要用于收集数据。在权限范围内，数据获取接口应支持通过如下方式收集数据： 粮食信息系统API 传感设备； 网络爬虫； 人工录人

数据访问接口用于对外提供数据访问服务。数据访问接口应支持如下访问方式： 数据库连接访问； 中间件访问； Webservice标准接口； Restful APl; FTP文件下载； 第三方软件访问，采用此种方式时，

数据日步接口在国家级和省级资源池间 同步数据。省级资源池应定期通过同步接口向国家级 推送更新数据。数据同步接口应支持数据的增量更新，支持数据的压缩和加密传输。数据应封 个单元进行传输，每个传输单元的数据量不宜超过5MB

类型的数据宜采用的存储模型 如下： 结构化数据宜采用关系模型组织； 具有明确键值对的非结构化数据宜采用键值模型组织； C) 面向分析型查询，需要高效压缩和I/O效率的数据宜采用列存储模型组织 d) 大段文本，或具有嵌套环结构的数据宜采用文档模型组织； e) 具有或能够抽象为明确的点边结构的数据宜采用图模型组织

缓存数据库主要对一定时间内访问过的粮食数据进行缓存，以减轻对主数据库频繁查询的压 数据库一般应将数据存储在内存中，并面向数据读取进行优化。缓存数据库应能够从不同的数 加载数据，但不得替代真正存放数据的各类数据库，

LS/T 18202018

图数据库主要用 阵查询，支持路径搜索，能够使用 值和关系进行索引

9.2.8多媒体数据库

数据索系引通过系引 车自带的索引功能，也可通过第三方索 方索引软件时，软件应支持分布式部署， 能够提供全文检索，拥有完备的查 和容错能力

资源池中的数据安全应符合GB17859、GB/T22239、GB/T22240和LS/T1807中对数据安全的 要求。其安全性要求还应包括： a） 数据库的安全应符合GB/T20273的要求，能够提供字段级、记录级以及文件级的加密与完整 性保护功能； 能够对数据资源设置不同的访问权限，支持基于角色的访问控制； C) 能够对用户进行分组管理，并基于用户组进行授权； 能够利用安全协议与证书对用户进行认证； e) 能够通过日志记录用户对资源的访问行为，并提供审计功能； f 能够根据数据的保密要求限定访问源，敏感数据应只接受来自内网、专线或虚拟专网的访问请 求，并通过加密或其他有效措施实现传输保密性

资源池中的数据安全应符合GB17859、GB/T22239、GB/T22240和LS/T1807中对数据安全的 求。其安全性要求还应包括： a） 数据库的安全应符合GB/T20273的要求，能够提供字段级、记录级以及文件级的加密与完整 性保护功能； 能够对数据资源设置不同的访问权限，支持基于角色的访问控制； 能够对用户进行分组管理，并基于用户组进行授权； d） 能够利用安全协议与证书对用户进行认证； e) 能够通过日志记录用户对资源的访问行为，并提供审计功能； 巧 能够根据数据的保密要求限定访问源，敏感数据应只接受来自内网、专线或虚拟专网的访问请 求，并通过加密或其他有效措施实现传输保密性

包括但不限于： a) 除对数据本身进行备份外，还应备份数据配置信息、数据维护日志、系统访问日志及数据访问 日志等； 应定期对数据做增量备份及全量备份，数据备份应保存两个以上版本，全量备份应在访问量较 小的时段进行； C) 能够支持手工备份和自动备份两种方式，备份策略能够灵活配置； d) 数据应能够在线备份，在不间断服务的情况下完成备份； 备份对象应能够按既定的备份策略备份到指定介质，备份介质包含磁带、磁盘、磁盘阵列、光 盘等； f 在允许的情况下，可通过异地备份机制进一步提升不可抗力下的系统容灾能力

a 备份数据应能方便快捷地恢复到在线系统，并确保其可用； 数据能够进行联机恢复，被恢复的数据必须保持原数据的完整性和一致性，提供完整的系统数 据安全监控、报警和故障处理； C 重要数据应提供断点恢复功能，数据能够恢复到故障前的状态； 任何原因导致的系统故障和数据丢失应在4h内恢复正常运行； e 对于数据库中数据块发生逻辑/物理损坏或单个表空间损坏的情况，能够支持通过恢复单个存 储空间对数据库进行恢复； 对于数据库出现逻辑错误导致数据库无法正常使用的情况，能够采用数据库的全备份（或增量 备份）结合数据库的归档日志文件进行恢复，

LS/T1820—2018zMM000MMMM导茸回册（）【V一咨2167286=I'z112

粮食数据集类型见表B.1

表B.1粮食数据集类型

B.2粮食数据存储模型

粮食数据存储模型见表

GB／T 37933-2019 信息安全技术 工业控制系统专用防火墙技术要求表B.2数据存储模型

数据更新频率见表B.3

表B.3数据更新频率

表B.4关联类型及其定义

DB37／T 3163-2018 金属非金属露天矿山企业生产安全事故隐患排查治理体系实施指南数据集服务类型见表B.5

表B.5数据集服务类型

数据集分类见表B.6。