V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Xuanwo
V2EX  ›  程序员

面向应用的 Golang 统一存储层

  •  1
     
  •   Xuanwo ·
    Xuanwo · 2020-01-13 18:18:13 +08:00 · 2166 次点击
    这是一个创建于 1782 天前的主题,其中的信息可能已经有所发展或是发生改变。

    Hi,我最近实现了一个库 storage,目标是成为面向应用的 Golang 统一存储层。

    用起来的感觉大概是这样:

    // Init a service.
    srv, store, err := coreutils.Open("qingstor://hmac:test_access_key:test_secret_key@https:qingstor.com:443/test_bucket_name")
    if err != nil {
        log.Fatalf("service init failed: %v", err)
    }
    
    // Use Storager API to maintain data.
    ch := make(chan *types.Object, 1)
    defer close(ch)
    
    err := store.List("prefix", pairs.WithFileFunc(func(*types.Object){
        ch <- o
    }))
    if err != nil {
        log.Printf("storager listdir failed: %v", err)
    }
    

    希望大家能来看看并提一些改进的意见~

    6 条回复    2020-01-14 13:00:33 +08:00
    jaynos
        1
    jaynos  
       2020-01-13 18:25:49 +08:00
    莫名的感觉和 https://github.com/rclone/rclone 这个仓库实现的东西有点像
    Xuanwo
        2
    Xuanwo  
    OP
       2020-01-13 18:30:39 +08:00 via Android
    @jaynos 这个库的设计目标就是让大家可以轻松的实现 rclone 这样对接多个存储后端的应用,不需要再每个都实现一遍
    hankai17
        3
    hankai17  
       2020-01-13 18:51:09 +08:00 via Android
    能压测么?
    Xuanwo
        4
    Xuanwo  
    OP
       2020-01-14 09:18:32 +08:00
    @hankai17 什么层面的压测?
    zunceng
        5
    zunceng  
       2020-01-14 11:35:39 +08:00
    现在各种对象存储 接口都是兼容 s3 的
    写的多 每个都要测试 也挺累的
    Xuanwo
        6
    Xuanwo  
    OP
       2020-01-14 13:00:33 +08:00
    @zunceng 之后会采用 BDD 测试的形式来做集成测试,只有少部分逻辑才会专门写单测了
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2774 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 00:04 · PVG 08:04 · LAX 16:04 · JFK 19:04
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.