专题数据库管理平台开发项目招标公告（2025-ZADANG-F4002）

功能模块

技术指标要求

数字资源仓储管理模块

1.系统管理

①系统参数管理。对系统运行的全局性参数进行管理和配置。

②屏蔽词管理。屏蔽词管理应提供屏蔽词添加、删除、修改、导出、查询等功能，当用户输入屏蔽词进行检索时，不返回检索结果。

③分类法管理。对系统预定义和自定义的分类法进行管理，管理员可以添加、删除、编辑、查询分类法。分类法用于索引和检索服务，检索结果可以根据分类法进行分面呈现。

④聚类特征集管理。对系统预和自定义的聚类特征集进行管理，管理员可以添加、删除、编辑、查询聚类特征集。聚类特征用于索引和检索服务，检索结果可以根据聚类特征进行分面呈现。

★2.数据库管理

①创建、克隆、删除。支持档案、图书、期刊、报纸、资讯、图片、视频、报告等各类型数据结构的数据库。支持数据库的创建、删除。支持克隆数据库以满足字段结构同类数据库的快速创建需求。

②配置管理。对数据库各类属性的设置管理功能，比如别名、标签、分类、缓存、索引块大小、库类别等。

元数据字段的基础设置、发布设置、引用格式、导出格式等功能。

其中基础设置用于灵活设置数据库字段，配置各个字段的含义及处理方式，如：必填、非空、密级、检索点名称、索引方式、聚类特征、字段权重、是否为可搜索字段、检索点等；发布设置用于数据库发布设置，支持定制前端网站概览页、细览页上数据库内容发布的模板，支持全文下载链接、来源出处链接、在线阅读链接、来源出处文本等的设置功能。

③索引管理。索引方式支持全量索引、增量索引以及实时索引等，同时提供索引队列管理。索引完成后用新的索引更替先前的索引。

④启动、停止、清空。提供数据库的停止、启动管理功能，以及清空数据库内容的管理功能。

⑤数据记录管理。数据库数据记录的读取、修改、删除、浏览、检索等管理功能。

⑥IP访问策略管理。提供IP访问策略的新增、修改、删除、查询等功能。知识服务系统的IP访问策略包括：开放策略、许可策略、拒绝策略。采用许可策略或拒绝策略时可设置数据库的许可或拒绝的IP或IP段列表。

支持对前台用户的整体IP访问策略、IP用户授权等进行管理。

⑦原始数据导出。根据数据类型制定分类标准及存储规则，建立索引及资源地图。通过多种方式将原始资源库中的数据批量导出，包括API接口、开放数据库连接等。

3.后期拓展。元数据仓储为开源模式，允许对元数据的描述字段进行扩展。预留未来扩展其他资源库系统的解决方案。在保证安全的前提下，不做技术壁垒限制与第三方做二次开发应用。

4.接口设计与扩充储备。本项目架构和设计须具备良好兼容性和可扩展性，数据层与应用层预留多种类型的接口，可以全面响应模块与功能的调用，便于系统与数据扩容，采用标准的XML规范实现第三方调用。规划预留数据与功能接口支持如下，包括但不限于：①检索接口；②采集数据接口；③检索输出

5.系统安全性需求。①访问安全，IP控制为主，账号密码登录为辅。系统提供组策略权限匹配；②数据安全，满足国家信息系统二级等保密要求；③代码安全，在项目开发、测试与部署阶段，需对程序代码进行安全性检测扫描。项目正式运行前，必须通过全面细致的安全性检测，针对项目系统存在的安全风险点在代码层和服务器层都进行安全加固。须通过安全性检测的项目包括：项目结构分析、代码遍历探测、CGI漏洞扫描、跨站脚本分析、SQL注入漏洞挖掘。

元数据整合治理模块

★1.支持对多种数据来源的全量/增量导入，包括但不限于：Orale、MySql、SqlServer、elasticseach、solr、Madl（Malis）、NpgSql、MongDb、Access、TRS、JSON、Tab文本、Csv、Excel、Frj等；

2.支持定制接口导入；

★3.支持常见资源商数据库的元数据导入，包括但不限于：档案管理系统、中国学术期刊（CNKI）、维普期刊、万方硕博论文等，同时包括基于MALIS系统自建的各类特色电子资源库和档案管理系统数据库，资源类型包含档案、图书、期刊、论文、图片、多媒体等。元数据管理细化到篇级，管理员可从各种维度对元数据进行查看与管理。如某些数据库系统因为改版或调整导致数据收集整合工具失效，需提供免费升级改造服务，确保收集整合工具的正常使用。

4.提供元数据增删改查的工具，方便管理员增补、修改、删除元数据；能够通过可视化界面，进行各种数据源元数据导入作业的定制，定制内容包括本系统数据表结构、外部数据与本系统数据表的字段映射、数据导入方式（全量导入、增量导入）等，并能自动或手动启动数据导入作业；

5. 清洗规范化处理。对基于统一元数据框架收割所得的原始元数据库，进行数据数清洗规范化处理。通过制定数据清洗规范，对数据及格式进行有效性验证和转换。包括：无效值清理、日期处理，既能识别各种日期，又要能够校验日期的有效性；全半角转换、分隔符统一；数字处理，既要能够识别各种数字，又要能够校验数字的有效性；

6.数据去重归并处理。数据的来源不同，可能导致同样的数据重复出现，因此需要将重复的数据去除。但考虑到不同来源的重复数据，可能在有些字段上可以互相补充，因此在按照核心要素去重的同时，合并其他可以互补的字段；支持数据来源自动归并，并能跳转访问各来源数据库的详细信息页面、下载全文以及音视频播放页面；

7.自动标引分类。提供自动标引分类工具，根据用户实际需求，对数据记录进行自动分类标引、分类、打标签等处理；

8.允许对元数据的数据质量标准进行定义，并对收割的元数据对照数据质量标准进行核查和统计分析，进而评估数据质量的优劣；管理员可选择需要进行核查的数据集，进行核查，核查结果通过列表和报表进行展示；

9.支持根据数据质量核查的结果生成数据质量报告，数据质量报告包括：数据集的来源、记录数、核查标准等基础信息；数据质量核查的结果列表、统计图表、异常数据列表；核查人、核查日期等要素；

10.数据筛查清理，允许管理员指定筛选条件，批量清理数据库中的敏感信息，清理出的信息允许管理员进一步鉴别、处理；

11.数据水印；通过数据治理的数据，根据核心字段项及相关管理特征数据计算生成数据水印，以此实现数据治理的追溯。

专题资源知识建设模块

★1.根据专题的研究方向，在整合数据的基础上，重组专题数据，并进行分类标引入库。具体工作包括：数据抽取、标引和入库；

2.数据抽取。从整合的数据库中抽取符合专题方向的数据记录，包括但不限于档案资料、期刊论文、电子图书、图片、视频、报纸文章、新闻、以及外文各类数据库等；

3.数据标引，采用自动标引和人工标引相结合的方式对抽取的专题元数据进行自定义标引；

4.数据入库，将标引好的数据定时自动向专题数据库中推送；

5.全文分页拆分检索，对专题资源能够根据题名、责任者、关键词、章节信息、摘要、全文等字段的检索；支持对PDF格式的图书自动按页进行拆分，创建全文索引，能够按页进行全文检索。

专题资源门户（含建站工具）

1.参数设置，实现对门户标题、编码、版权、地址、联系方式、访问限制、绑定域名或IP等基本参数设置；

2.模板管理，可以定义多个模板方案。支持可视化编辑，网站管理人员可对页面进行分割布局、自由调整模板各区块文本、图片、视频等要素；

3.内容管理提供对各频道栏目数据来源的设置，实现对后台数据访问。支持对包括门户公告、资源更新情况等栏目内容的添加、修改、删除，支持内容在线采编、著录。

4.网页模块管理用于可视化建站的模块，实现网页信息导航、信息发布、统一检索等网页服务功能。具体包含：数据列表（提供数据列表的自定义展示模板，可以引用以及编写相关Html代码，进行数据的自定义展示）、简单图文、图片、Flash、多媒体、多图展示（图文列表、滚动、轮播、幻灯等）、搜索框、Html片段、嵌入窗口、导航条、页脚、日历、在线用户及访问计数，热搜词等。

5.模块风格管理，提供系列模块风格，可以通过选择模块风格，快速变化模块的包装形式，配合页面的整体设计；

6.网站设计，设计专题资源门户网站显示的效果，设计页面的排版及字体、图片的样式 (包括banner、图标、配色、框架等) ，界面美观大方，与专题资源主题匹配，做好图纸设计；

7.快速检索，快速检索功能为前端用户提供专题资源一站式全文检索，系统通过统一数据格式标准汇聚各类数字资源，在不侵入原始数据集的基础上搭建索引库；

8.对已整合进入元数据仓储的信息资源提供快速检索、高级检索、专业检索。在专题资源门户首页部署快速检索入口，在统一检索结果概览页上提供二次检索的功能。

9.高级检索入口具有多类型（档案资料、纸质书刊、数字书刊、论文、视频、图片、软件等）、多途径（题名、关键词、责任者、密级等）、多来源（不同的信息资源库）、多逻辑（与、或）、多语种、多精度（精确匹配、模糊匹配）的组合选择，同时支持同义词扩展检索、相似性检索等检索方式。

10.专业检索入口允许专业用户自己编写检索表达式检索。

11.采用分面引导式的搜索展现模式，用户提交检索请求后；系统可展示搜索结果在不同数据库中的命中数，用户点击感兴趣的数据库后，展示检索结果在各分类项、各特征分面、各检索点（题目、责任者、关键词、摘要、正文等）中的命中数，用户进一步点击分类项、分面特征、检索点后可快速缩小搜索结果的范围，精准地找到所需的资料。

12.检索结果概览页面列表显示的字段及样式可由后台管理员根据不同资源类型自定义选择（包含题名、时间、责任者、密级、资源类型、来源资源库名等）。

13.概览页显示检索式、结果数量、检索耗时，支持命中词的反显。当命中数大于单页显示数量时，显示翻页功能，允许管理员自主设定最大可返回记录数，以保护数据库免被恶意下载。

14.支持以检索词与标题、关键词、摘要等字段的相关度排序，支持检索结果按时间排序。

15.细览页提供数字资源全文下载，提供查看来源资源库细览页功能。提供不同来源资源库原始细览页跳转功能，提供相似文献推荐功能。

16.关联知识服务，提供按搜索词进行相关知识的关联功能。包括相关热搜词服务、对应百科词条数据等。提供相关文献关联功能。比如提供某文献的同类主题文献、或包含有相同检索词的文献、参考文献等的关联功能。为前端服务网站展现搜索词关联知识服务提供数据基础。

17.支持按搜索词提供相关研究领域的热点发现功能。如挖掘该研究领域的论文发表趋势数据、关联该领域相关领域的论文发表趋势、领域之间的交叉关系，从相关研究机构等角度，挖掘该研究领域具有影响力或者有较高相关性的研究机构等。为前端服务网站展现搜索结果相关的可视化研究热点提供数据基础。

18.自动推荐功能。在内部局域网环境下，基于国产大数据模型，应用智能AI技术，实现深度语义匹配，提供文献相似度计算模块功能、图片相似度计算模块功能，为前端服务实现相关文献、图片的自动推荐。

19.系统支持设定敏感词，对检索条件含有的敏感词进行屏蔽，禁止返回相关检索结果。

日志统计分析利用模块

1.用户行为记录，全面记录用户的所有检索、浏览及下载行为，每次行为形成一条记录，记录内容包含行为时间戳、行为类型（包括浏览、检索、下载、Html预览下载等）、用户IP地址、网站地址（域名或IP）等所有可获取信息。

2.用户行为统计分析，基于详细的行为记录，指定行为类型、时间段、数据库等不同维度（可同时指定多个维度，以缩小统计范围），统计行为总量，图形化展示各行为的数量与占比，各资源库浏览量及占比、下载量及占比。支持以饼形图、柱状图、表格等形式展示各资源库的浏览、检索、下载次数；支持以曲线图的形式展现专题资源库在指定时间范围内的使用趋势；内容支持复制和导出。

3.支持指定时间段、文献类型、行为类别等维度，对数字资源按被使用量（访问量、下载量）进行排序，以得出热门数字资源排行榜。

4.支持指定时间段对所有检索词按被检次数排序，以得出热搜词榜。