设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
节点
飞墙
Follow
明白贴
工算小助手
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
程序员
›
请教一下各位佬,关于 ETL 落地技术方案的讨论 ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
结婚前隐瞒了我爸曾经因为肇事逃逸坐过几个
›
咨询大家一个职场陷阱,如何破局
›
开发了一款无广告的下载器
›
很好奇,国内的公务员事业单位面试存不存在
›
为什么绝大部分网站,用户光标 hover 按钮
今日热议主题
互联网全链路黑话大全
做了个 OpenClaw 一键部署平台, 30 秒启动
运维、运维开发创业的可行性
做了一个自托管的 AI 盯盘工具,想听听大家
做了个 AI 心理测试小站,想请大家帮我挑挑
申请收录个人博客 woodchen.ink
975 出 1.3 万 E 卡, 2 张 5000, 3 张 10
慢出一台 switch+健身环, OLED 版本。
收 iPhone 15 pro 或者 16 pro 或者其他带
拿了 广电运通的 Offer, base 广州,有大
显示全部
|
最新评论
15 条回复
·
1747 次点击
11#
beihanggmj
小成
2025-8-4 17:40:34
分批次慢慢导出数据,用时间换算力。方案有很多,比如设置一个秒级别的 crontab 任务,一秒导出 1 万条这样的形式,时间间隔和单次 batch_size 可以按时间交付时间/需求设置具体的变量满足客户要求。
12#
aarones
小成
2025-8-4 17:52:29
按照需要,一个任务只跑几个库或者几个表就行了,这点数据没多少,找个凌晨 3 点跑一下就完事
13#
min
小成
2025-8-4 17:52:43
参数设置好,100 分钟跑完就无压力咯
14#
cccssss
初学
2025-8-4 18:14:17
去客户机房硬盘对拷一份,然后跑增量
15#
glacer
初学
2025-8-4 18:25:27
如果不开 binlog ,实时同步基本就做不了了。 只能分批次在深夜启动任务做全量同步,全量结束后,同样在深夜拉最新一天的数据做日增量即可。
16#
cloudzhou
小成
2025-8-4 18:35:54
你这个应该要确定下方案先,尤其是否 binlog ,这个方案就差别很大了
1
2
/ 2 页
浏览过的版块
问与答
二手交易
返回顶部