V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
lien321
V2EX  ›  分享创造

[自研开源] MyData 诚邀试用体验,成为永久免费用户 & 附集成案例

  •  
  •   lien321 · 230 天前 · 1049 次点击
    这是一个创建于 230 天前的主题,其中的信息可能已经有所发展或是发生改变。

    MyData ,一个旨在简化 Web 应用之间数据对接的工具,提高日常工作效率,如其名“我的数据” 旨在让用户更好的掌控和管理数据。

    v1.0 的目标是:针对多应用之间数据集成的场景,为开发人员提供更安全、更方便的对接集成方案;

    开源地址:gitee | github

    诚邀试用

    经过一段时间的打磨,MyData 升级到了 v0.8.0 版本,诚挚邀请更多用户试用;

    详细介绍见 MyData 基于 Web API 的数据集成平台

    系统的主要功能和优势:

    • 集成度高:通过 API 集成数据,没有数据库类型、开发技术等限制,有 API 即可对接;
    • 数据安全:无需开放业务系统数据库;
    • 零侵入性:无 SDK ,业务系统有 API 即可集成;
    • 可控性高:统一调度集成任务,对业务系统几乎无感知;
    • 复用性高:业务系统迁移、技术升级等,无需重复集成,API 可用即可恢复集成;
    • 私有部署:支持本地部署,防止数据外泄;

    特此承诺:

    作为试用用户可享受 免费试用免费升级功能全程技术支持

    前 10 位纳入实际项目使用的将成为永久免费用户

    试用方式:联系微信,开通专属账号,开展数据集成;

    截止日期:2024-08-30

    wx

    案例:电商场景 - 跨平台集成商品

    案例背景

    有用户在初创阶段建了两个商城,一个在trademe 平台、另一个用 WooCommerce自建商店,虽然是两个独立运作的商城系统 但商品库存是共享的;

    前期通过手动方式分别维护两端的商品信息和更新库存,但随着商品种类增多、两个平台的订单量增长,需要简化两边库存的检测和同步工作;

    集成方案

    通过调研,两个平台都能提供 API 和 web hook ,可实现定时同步和实时同步;

    • 方案一:定制开发对接程序

      优点:可以根据用户的具体需求进行定制,确保最终产品能够完全满足用户的需求和期望;

      缺点:成本较高,包括前期的人员、资源,后续的维护、需求变更等方面,对初创用户代价较高;

    • 方案二:使用 MyData 集成

      MyData 适用于 HTTP(S)协议 API 的应用之间对接数据,入驻平台即可通过配置实现数据集成;

      优点:通过界面配置即可完成数据对接,且无需额外资源和维护升级成本;

      缺点:部分需求 平台暂时无法满足;

    最终,选用 MyData 进行集成,通过分析需求 暂时无法满足的需求 可通过升级功能实现,既低成本地实现了用户需求 也升级了平台功能;

    集成效果

    通过界面配置应用 API 、数据标准和定时任务,实现定时拉取、合并数据和邮件推送;

    • 应用 API 配置

      image

    • 集成管理,查看数据量、来源、去向、任务情况 image-20240410192709645

    • 数据标准

      image-20240410192402536

    • 定时任务

    image

    • 推送邮件

      image-20240410202108477

    4 条回复    2024-04-11 22:46:53 +08:00
    ZGame
        1
    ZGame  
       230 天前
    简单看了下网站,我感觉 op 还是需要做的更加深入一点。
    我个人理解做数据集成,核心有几点,元数据的管理,数据转换,工作流调度,和前端可视化接入方式(用户可以通过 Sql,脚本,拖拉拽的方式实现)。
    拿核心的数据转换来说,像第一代 Kettle 数据转换框架,我觉得起码得抽象出 Job(任务),Trans(转换),Step(步骤),MetaData(元数据),TransHop(步骤之间的连线),Rows(行数据),Value(值)等概念,这样源头(db,http,其他输入介质)才方便对应到代码层级。
    zyxcompany
        2
    zyxcompany  
       230 天前
    感觉步入开源开放使用,后续再收费,用户群体太少了
    lien321
        3
    lien321  
    OP
       230 天前
    @zyxcompany 你好,目前是开源且开放使用的,适用要做集成的技术人员,没有技术也可以提供技术支持
    xhawk
        4
    xhawk  
       230 天前 via Android
    我有在用 windmill 你可以参考看下
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1366 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 20ms · UTC 17:38 · PVG 01:38 · LAX 09:38 · JFK 12:38
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.