登录
元数据管理工具（LinkedIn WhereHows）
WhereHows提供对结构化和非结构化元数据的全面管理，具有强大的数据目录和搜索功能，便于数据发现和使用，由LinkedIn开源，拥有强大的社区支持和文档资源。适合需要全面元数据管理和数据目录功能的公司，尤其是大型互联网企业或拥有海量数据的企业。提供了直观的Web界面，用户可以通过浏览器访问该平台，进行数据发现、血缘查看、注释、讨论等操作。界面简洁易用，方便非技术人员也能快速上手。
2025-01-02
1
4
5
身份和访问管理解决方案（Keycloak）
Keycloak是一个开源的身份和访问管理解决方案，适用于现代应用程序和服务。项目地址：https://www.keycloak.org/提供强大而灵活的身份验证和授权机制，可轻松集成到各种应用程序中；支持单点登录，用户一次登录可在多个关联系统间无缝切换；允许管理员对用户进行有效管理，并提供自定义认证流程以满足特定业务需求。
2025-01-01
1172
8
6
开源身份验证框架（Supertokens）
Supertokens是一个开源的身份验证框架，可简化现代Web和移动应用的用户认证流程，确保数据安全性。使用最新安全标准，如HTTPS、JWT签名以及防止CSRF攻击的方法；支持多种编程语言和框架，如Node.js、Python、React、Vue等；结合了电子邮件验证、密码验证和社交登录，提供全面的身份验证解决方案；通过JWT令牌进行无状态会话管理，减轻服务器负担。
2025-01-01
1153
0
9
数据目录和元数据管理（Metacat）
Metacat是一个开源的数据目录和元数据管理工具，它能够有效地处理和管理跨多种数据源和数据存储系统的元数据。其设计目的是帮助企业构建一个统一的数据目录，使得数据使用者能够更容易地发现、理解和使用数据。Metacat能与多种数据库、数据仓库和数据湖集成，支持复杂的数据生态系统。提供丰富的API，便于开发者进行二次开发和系统集成，支持多种元数据存储方式。
2024-12-31
1096
8
11
中央认证服务（CAS）
Central Authentication Service（CAS）即中央认证服务，是由耶鲁大学发起的企业级开源项目，采用Java语言编写，使用Apache2.0协议，为Web应用系统提供可靠的SSO解决方案。支持CAS v1、v2和v3协议，以及SAML v1和v2协议、OAuth v2协议、OpenID & OpenID Connect协议等；支持通过JAAS、LDAP、RDBMS、X.509等多种组件进行身份验证；支持将身份验证委派至WSFED、Facebook、Twitter等服务来完成；支持通过ABAC、Time/Date等进行授权控制。
2024-12-31
1
1
7
数据资源管理系统（CKAN）
CKAN（Comprehensive Knowledge Archive Network）是一个开源的数据管理系统，主要用于发布、共享和管理数据资源。它提供了一个集中式的平台，使得政府机构、企业、研究机构和社会组织等能够有效地组织和利用数据。从本质上讲，CKAN就像是一个数据仓库，但是它更侧重于数据的发现、共享和协作。它可以存储各种类型的数据，包括但不限于数据集（如统计数据、地理信息数据）、文档（如数据字典、数据使用手册）和链接（指向外部数据资源的链接）。
2024-12-31
595
4
12
数据科学平台（Nebari）
Nebari是一个开源的数据科学平台，构建于可扩展性和协作性之上，集成了JupyterHub和Dask Gateway等工具，利用Terraform、Helm、GitHub Actions等技术，可应用于学术研究、企业级数据平台、教育机构、高性能计算等场景。一、技术架构1.基于Kubernetes：Nebari利用Kubernetes强大的容器编排和管理能力，实现对计算资源的高效调度和管理，确保平台在大规模数据处理和多用户并发访问时的稳定性和可靠性。
2024-12-31
609
6
11
开放数据框架（SODA）
SODA项目由Linux基金会托管，旨在推动构建数据自治的开放源代码数据管理和存储软件生态系统。整合了多个子项目，提供全面的解决方案框架，可用于大数据管理、云存储优化、数据治理、物联网等多种场景。SODA项目是一个涵盖多个项目的数据框架集成体，旨在为用户提供整体框架解决方案。
2024-12-30
824
6
0
SSL证书管理工具（Certimate）
Certimate是一个开源免费的SSL证书管理工具，采用私有部署方式保障数据安全，通过简单配置可自动申请SSL证书，并在证书快过期时自动续期，还支持与阿里云、腾讯云等主流服务商对接，可将证书自动部署到多个主流服务商的平台上。项目地址: https://github.com/usual2970/certimate
2024-12-30
778
6
3
数据质量工具（DataCleaner）
DataCleaner：提供数据质量分析、清洗和监测的开源平台，支持多种数据源，可帮助用户发现数据中的问题，如缺失值、异常值、重复数据等，并提供相应的清洗和处理功能，适合进行数据质量初步评估和持续监控。DataCleaner提供了直观的用户界面，使数据处理人员和分析师能够轻松地对数据进行复杂的操作，以确保数据的准确性、完整性和一致性。
2024-12-30
886
3
13
数据清理和转换工具（OpenRefine）
OpenRefine是一款开源的数据清理和转换工具，它最初由谷歌开发，原名Google Refine。它主要用于处理杂乱、不规范的数据，帮助用户对数据进行清洗、转换和重新格式化，从而使数据更适合用于分析、可视化等后续操作。它提供了一个直观的图形界面，用户无需具备深厚的编程知识即可完成复杂的数据处理任务。不过，对于高级用户，它也支持通过编写代码（如使用GREL表达式 - General Refine Expression Language）来实现更精细化的数据操作。
2024-12-29
744
3
9
分布式内存数据存储和计算平台（Hazelcast）
Hazelcast是一个分布式内存数据存储和计算平台，具有容错性且易于扩展或缩减，可让用户更快地访问数据。Hazelcast提供分布式数据结构，如分布式队列、分布式集合、分布式锁等，方便在分布式环境中进行数据共享和协作。支持数据的自动分区和负载均衡，能够根据集群中节点的数量和负载情况，自动调整数据的分布，确保数据的均匀存储和访问。具备强大的容错机制，当节点出现故障时，能够自动进行数据恢复和故障转移，保证系统的高可用性。
2024-12-29
1041
5
4
数据去重评估开源平台（Destor）
Destor是一个专门用于数据去重评估的开源平台，提供了一套完整的工具集，包括容器化的存储、块级处理管道、多种指纹索引和重写算法等，可有效提升数据去重的效率和效果，从而间接提高数据质量。一、主要特点1.全面性：覆盖了从数据分块到恢复的整个数据处理流程，包含多种主流的数据去重策略和技术，如固定大小分块、内容定义分块（CDC）以及近似文件级去重等。
2024-12-28
517
1
12
开源数据质量库（Deequ）
Deequ由亚马逊开源的数据质量库，基于Scala和Spark构建，用于定义数据质量规则并执行它们，特别适用于大数据环境，能够处理大规模的数据集。主要使用Scala编程语言，构建在Apache Spark之上，能够利用Spark的分布式计算引擎来定义和执行数据质量检查。采用Apache-2.0 license开源协议。
2024-12-28
720
8
4
基于大语言模型的知识库问答系统（MaxKB）
MaxKB是一款基于大语言模型和检索增强生成（RAG）技术的开源知识库问答系统。MaxKB 是由飞致云旗下的 1Panel 团队开发的。github地址: https://github.com/1Panel-dev/MaxKB一、核心特点1.开箱即用：支持直接上传文档、自动爬取在线文档，并提供文本自动拆分、向量化、RAG等功能，能有效降低大模型的“幻觉”，为用户带来流畅准确的智能问答体验。
2024-12-27
637
2
12
权限管理平台（mayfly-go）
mayfly-go：Web版Linux、数据库、Redis、MongoDB统一管理操作平台，提供了完整的权限管理功能，支持对账号的角色以及资源进行分配，可针对不同的用户角色，分配不同的菜单和权限，从而实现对数据资源的有效管理。一、功能特点1. 用户管理 可以实现用户信息的增删改查操作。例如，管理员能够方便地添加新用户，输入用户的基本信息如用户名、密码、邮箱等。同时，也可以对已有的用户信息进行修改，如更新用户的联系方式或者重置密码等操作。对于不再需要的用户账号，也能够进行安全删除。
2024-12-27
1073
0
13
开源的数据质量管理（Qualitis）
Qualitis是微众银行开源的数据质量管理系统，专注于解决业务系统运行、数据中心建设及数据治理过程中的数据质量问题，提供了多种数据质量检测方法和自动生成报告的功能。一、核心功能1.数据质量模型定义：支持单表、多表以及自定义等多种数据质量模型，还预设了空值检查、空白检查、数值检查、枚举检查等常见的数据质量验证模板，简化了数据质量模型的定义工作。
2024-12-26
1129
7
0
内存数据网格平台（Infinispan）
Infinispan是一个开源的高性能、分布式的内存数据网格平台，可作为数据库的前端缓存层，提供数据缓存和存储功能，适用于需要处理大量数据的高并发应用场景。将所有数据存储在内存中，读写速度极高。支持分布式部署，能在多台服务器间共享数据，实现水平扩展。通过复制或分区方式实现数据冗余备份，支持自动故障转移和负载均衡，确保节点故障时服务的连续性。此外，还支持标准的SQL查询语法，可直接对内存中的数据进行查询操作，并提供多种缓存策略供用户根据业务需求选择。它提供了一个内存数据网格（In Memory Data Grid，简称IMDG）解决方案，允许数据在多个节点的内存中进行存储和管理，以实现低延迟、高吞吐量的数据访问。
2024-12-26
943
5
13
专业数据治理服务（Professional Data Governance Services）
数据治理服务是一种综合性的服务，帮助企业或组织对其数据资产进行有效管理和优化。它涵盖了数据治理策略的制定、数据标准的建立、数据质量的提升、数据安全的保障以及数据价值的挖掘等多个方面。通过一系列的流程、工具和技术，确保数据在整个生命周期内的准确性、一致性、完整性、安全性和可用性。
2024-12-26
1149
5
1
企业级开源监控解决方案（Zabbix）
Zabbix 是一个功能强大的企业级开源监控解决方案，它不仅可以收集和监控各种系统和网络数据，还提供了一定的数据可视化功能。它能够生成详细的报表和图表，展示监控对象的状态和性能指标。例如，通过 Zabbix 可以生成服务器资源使用情况的周报或月报，以直观的图表形式呈现给运维管理人员。
2024-12-25
515
5
11
© 2021 - 现在 杭州极深数据有限公司 版权所有 联系我们 
浙公网安备 33018302001059号  浙ICP备18026513号-1号