V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
pmispig
V2EX  ›  程序员

hive 每天数据清洗后导入 mysql 产生大量无意义 binlog

  •  
  •   pmispig · Jun 4, 2020 · 1792 views
    This topic created in 2153 days ago, the information mentioned may be changed or developed.

    看到 mysql 支持配置 binlog-ignore-db,但不支持到具体表,而且更改这个参数需要重启,代价太大。
    而如果在 client 临时关闭 binlog, SET sql_log_bin = 0 ,则需要 super 权限,这个权限太高了。
    请问有没有比较好的办法解决

    2 replies    2020-06-04 15:27:18 +08:00
    pmispig
        1
    pmispig  
    OP
       Jun 4, 2020
    0.0 咋一条回复都没有,同志们都不用 hadoop hive 吗
    msg7086
        2
    msg7086  
       Jun 4, 2020
    变动 binlog 本来就要高权限,你又不愿给高权限……
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5933 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 51ms · UTC 06:38 · PVG 14:38 · LAX 23:38 · JFK 02:38
    ♥ Do have faith in what you're doing.