设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
资源
节点
飞墙
Follow
明白贴
报酬
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
Java
›
请教下微服务间大批量数据获取一般是如何处理的 ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
关于在大城市留不下来这件事,大家都是怎样
›
如果你现在中了大乐透一等奖,你会?
›
我的人生好像有点坏掉了,请大家给点建议
›
公司组团去泰国旅游安全吗?
›
房贷要提前还吗
今日热议主题
[武汉作业帮海外新业务] 招募全职 Android
拿到了 300 来部短剧的海外发行版权,下一
重度苹果用户投华做了两面派
借闪电贷后续
f友们,江湖救急, Google Authenticator
全球首个支持微信支付的 Claude Code 购买
宽带被封,理由是疑似 PCDN,问题是没有搞 P
长话短说 大家觉得花三十万结婚,存款花完
经常上火,口腔溃疡,牙疼。 大家有没有好
大佬没,有没有啥教人怎么沟通的书推荐的?
显示全部
|
最新评论
16 条回复
·
563 次点击
11#
povsister
小成
2024-10-17 09:05:27
你这种 case 如果数据量持续上升,应该用 spark 这种离线作业,或者压根不应该拆分服务。
12#
Wh1t3zZ
小成
2024-10-17 09:13:42
流式数据处理
13#
Plutooo
小成
2024-10-17 09:21:12
把 B 服务当成直接从数据库查不也是存在一样的问题么,还是说担心 B 服务的内存占用
14#
landerwong99
小成
2024-10-17 09:34:23
要么就离线近源处理,来个服务直接调 B 库的只读库,
要么就流式处理,使用 kafka 之类的。
15#
ZZ74
小成
2024-10-17 09:41:58
搞那么麻烦干啥,导出文件写入共享目录,调用接口通知 喂 数据我放到 xx 目录下的 x 文件里了
16#
lifei6671
小成
2024-10-17 09:47:03
一般情况下是通过下面方式实现的:
1 、建立只读线下备库,通过从库的方式从线上库实时同步数据,不能用于线上系统读,只能用于线下业务大批量读。
2 、建立只读从库,和主库实时同步,只能进行线上系统只读。
3 、通过 binlog 实时建立分析宽表,一般用来汇总各个业务方数据,建立大宽表,支持线下业务分析已经大批量查询等。
17#
kaf
小成
2024-10-17 09:47:29
流格式数据
1
2
/ 2 页
浏览过的版块
分享创造
纯水
生活
iPhone
旅行
随想
职场话题
推广
创意
广州
返回顶部