《Network》:NIKH-DS: A Network Provisioning Platform for Data Exchange in the Health Data Space
编辑推荐:
在健康领域,跨分布式数据源进行安全且可信的数据交换仍是一项重大挑战,必须满足严格的法律、监管和隐私要求。数据空间技术提供了一种有前景的方法,能在维护数据所有权和法规遵从性的同时,实现多样化利益相关者之间可互操作且主权化的数据共享。NextGEM创新与知识中心(
在健康领域,跨分布式数据源进行安全且可信的数据交换仍是一项重大挑战,必须满足严格的法律、监管和隐私要求。数据空间技术提供了一种有前景的方法,能在维护数据所有权和法规遵从性的同时,实现多样化利益相关者之间可互操作且主权化的数据共享。NextGEM创新与知识中心(NIKH)被开发为一个协作生态系统,用于FAIR(可发现、可访问、可互操作、可重用)数据访问和基于证据的健康风险评估。本文介绍了NIKH数据空间(NIKH-DS),即NIKH内部底层的网络配置平台,该平台能在健康数据空间环境中实现安全的数据交换。本研究工作概述了在分布式数据位置之间实现安全的网络配置数据共享所必需的关键要求、预期用途和核心已实现功能。基于这些要求,提出了一个集成了安全网络和可互操作服务的原型架构框架。研究人员描述了各个组件的实现,包括数据空间控制器、访问控制机制,以及一个面向用户的仪表盘,该仪表盘能实现数据可视化及与分布式数据源的交互。NIKH-DS平台通过一组案例研究进行了验证,这些研究展示了该平台在支持安全、可互操作且符合FAIR原则的健康数据共享及风险评估方面的可行性和有效性,以研究射频电磁场(EMF)的潜在健康影响。
论文解读
**研究背景与现存问题**
在环境健康等敏感领域,数字技术的快速扩张和数据的持续增长加剧了对安全高效数据交换机制的需求。传统的数据共享平台通常依赖集中式架构,作为交易的权威第三方,需要所有参与方信任,这在信任和透明度方面存在局限。虽然一些研究提出了基于区块链的去中心化解决方案以增强访问控制和可审计性,但这些技术在可扩展性方面仍面临严峻挑战,例如吞吐量限制、存储和网络约束。更重要的是,现有解决方案未能完全实现一个同时兼顾安全性、可互操作性和主权化数据交换,并将数据所有权保留在数据源端的共享模型。为应对这些挑战,数据空间范式应运而生,它作为一个去中心化框架,在共享治理和标准化接口下,允许数据所有者保留控制权,同时实现可信的数据交换。在这一背景下,NextGEM项目为电磁场(EMF)暴露场景下的健康相关知识生成提供了框架,其关键成果NIKH旨在建立协作知识中心。本文提出的NIKH-DS平台正是为了在该健康数据空间中实现安全、可互操作且可扩展的数据交换。
**研究内容与意义**
研究人员设计并开发了NIKH-DS平台,这是一个网络配置平台,旨在支持健康数据空间内基于分布式数据源的安全、可互操作和可扩展的数据交换,用于知识共享和风险评估。该工作扩展了先前的研究,其主要贡献包括:(1) 设计并开发了一个数据空间使能平台,通过网络配置和细粒度访问控制机制支持可靠、安全的数据管理和交换,并遵循FAIR数据原则;(2) 提供了一个用户导向的仪表盘,便于数据可视化、探索和分析;(3) 通过三个关于电磁场暴露潜在健康效应的真实案例研究,部署并验证了平台的适用性。该平台通过实施数据空间原则,实现了分布式利益相关者之间安全、可互操作且受策略驱动的数据交换,对于推动符合法规的健康数据共享和循证风险评估具有重要意义。论文发表在《Network》期刊。
**关键技术与方法概述**
为实现NIKH-DS平台,研究人员采用了多种关键技术。在架构设计上,平台遵循三层架构(应用层、服务层、基础设施层)并整合了数据空间“即服务”(as-a-Service)模型,以提供灵活性。平台核心功能基于Eclipse数据空间连接器(EDC)实现,并利用Eclipse最小可行数据空间(MVD)作为参考部署,提供表述性状态传递应用程序编程接口(RESTful API)以支持互操作。服务编排采用Kubernetes进行容器化管理,所有核心组件均以Docker容器形式独立部署。访问控制通过Keycloak实现统一的身份与访问管理(IAM),支持基于角色的认证与授权。数据湖服务采用MongoDB数据库存储结构化、半结构化和非结构化数据及元数据。前端仪表盘使用React.js和Node.js构建,并利用Next.js框架实现服务端渲染。平台的验证与数据交换基于来自NextGEM项目的三个案例研究进行,涉及多个欧洲研究机构的分布式数据源。
**研究结果**
**NIKH架构框架的设计**
NIKH被设计为一个协作框架,其架构分为三个主要层级:(1) 应用层(Application Layer),提供用户通过网页和移动界面与平台交互的接口,支持基于角色的访问控制和可视化;(2) 服务层(Service Layer),包含核心功能服务,其中控制器(Controller)作为中央网关处理API、认证和元数据目录,数据空间服务则确保数据保留在源端并按授权请求共享;(3) 基础设施层(Infrastructure Layer),由物理和虚拟组件构成,通过虚拟机管理程序(Hypervisor)实现虚拟化,承载控制器、数据空间服务等关键组件,确保高可用性和安全性。
**NIKH-DS中的数据空间服务**
为实现灵活扩展,NIKH-DS将数据空间连接器与数据存储解耦,提出了四种“即服务”模式:(1) 数据即服务(Data-as-a-Service, DaaS),为注册成员提供无缝数据访问,无需本地基础设施;(2) 连接器即服务(Connector-as-a-Service, CaaS),在本地部署专用连接器容器和支持服务,支持安全数据交换并保留数据主权;(3) 场所即服务(Premises-as-a-Service, PaaS),为资源有限的参与者提供虚拟场所和共享存储,由平台确保高可用性;(4) 数据空间即服务(Data-Space-as-a-Service, DSaaS),允许根据需求复制整个平台以创建外部数据空间生态系统。
**NIKH-DS平台的开发**
NIKH-DS平台的开发实现了全面的数据空间功能:(1) 数据空间连接器与服务部署(5.1小节),基于开源EDC部署了连接器运行时、联邦目录服务(Federated Catalog Service)用于数据发现,以及数据空间权威服务(包括注册服务和身份中心)用于参与方管理和凭证交付,并采用Azurite模拟器作为对象存储;(2) 控制器与数据空间生态系统的互连(5.2小节),开发了包含认证管理器(Authentication Manager)、元数据管理器(Metadata Manager)和连接器管理器(Connector Manager)的控制器,以编排和管理请求,实现与EDC的连接;(3) 访问控制管理(5.3小节),通过部署Keycloak实现统一的身份与访问管理(IAM),支持用户注册、登录和角色分配,并通过客户端密钥确保应用间安全通信;(4) 控制器的数据湖服务(5.4小节),采用MongoDB作为数据湖,以灵活的JSON格式存储资产元数据和行政数据;(5) 数据空间生态系统的可靠性(5.5小节),通过实施双存储备份与恢复机制,利用MongoDB和NFS(网络文件系统)持久化存储资产、策略和合同,防止数据丢失。
**NIKH-DS仪表盘**
研究人员开发了NIKH-DS仪表盘作为用户友好界面,该仪表盘通过控制器API与后端通信,提供四项主要功能:(1) “资产与联邦目录”(Assets and federated catalog),允许成员上传数据资产、填写元数据,并通过联邦目录聚合生态系统内所有可发现的资产;(2) “合同与策略”(Contracts and policies),支持创建和管理资产访问策略,包括公开、禁运后公开、限制访问和封闭四种类型;(3) “场所与用户”(Premises and users),列出所有已注册的场所及其活跃连接器状态,并展示所有注册成员信息。所有交互均需通过Keycloak单点登录进行严格认证和授权。
**NIKH-DS在NextGEM案例研究中的应用**
为验证平台,研究人员将其部署于NextGEM项目的三个案例研究中:(1) 案例研究1:室内射频暴露对弱势群体的潜在影响;(2) 案例研究2:优化室外城市规划与5G架构设计;(3) 案例研究3:毫米波电磁场在室内外环境中的健康影响。研究结果显示,NextGEM数据空间生态系统成功部署了来自20个合作机构的场所,每个场所运行独立的连接器容器。联邦目录中共管理了69项与研究相关的资产,用户可根据策略和合同进行访问或请求下载。关键验证步骤是将NIKH-DS资产与NextGEM内部开发的风险评估(RA)工具集成。通过“从数据空间添加”(Add from Dataspace)功能,数据资产能被导入RA工具,与通过DOI添加的文献共同用于危害识别、暴露评估和风险表征的工作流程,证明了平台支持可互操作、符合FAIR原则且可追溯的综合EMF风险评估。
**总结与结论**
本文的讨论部分指出,NIKH-DS平台的部署与案例研究验证了其在真实研究环境中实现数据空间原则的功能性,其优势在于标准化的元数据管理、联邦目录服务和受控访问机制,保障了数据主权与合规性。与RA工具的集成则展示了其操作适用性。然而,平台目前存在基础设施层面的局限性,如数据集数量和大小受限,可能影响大规模场景下的性能。此外,当前验证仅限于NextGEM项目范围内,未来需评估与外部数据空间生态系统的互操作性和长期运营可持续性。还需注意的是,本项工作的评估重点在于可行性论证和操作适用性,而非量化的系统性能指标。研究结论部分(第8节)明确指出,本文展示了NIKH-DS平台作为安全、可互操作的分布式数据管理基础设施的设计与有效性。通过在NextGEM项目中的部署,证实了实施数据空间服务以支持受控数据共享和可重复工作流的实际可行性。该平台通过实现结构化数据发现、安全访问控制和透明数据溯源,支持FAIR数据交换,加强了科学分析的可靠性。未来的工作将聚焦于提升可扩展性、增强与外部数据空间生态系统的互操作性,并进一步自动化治理与策略执行机制。