设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
节点
飞墙
Follow
明白贴
工算小助手
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
Java
›
请教下微服务间大批量数据获取一般是如何处理的 ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
反对牢 A 的人到底在反对什么?
›
我不理解几乎所有 SSH 加固都提到配置公钥
›
混电车不省油也不省钱
›
微信疯起来六亲不认 元宝都给封杀
›
AI 都那么强了,传统的学校教育价值是不是
今日热议主题
Notion 和 Gitbook 有什么区别?
iPhone 阔折叠设备的推出是不是会利好 iPad
请问 openai 的充值方式有哪些,好像国内 v
现在哪里还有便宜的流量卡啊
我对家里的态度正常吗?
有没有花洒推荐🚿
悲,看飞牛的日志,估计已经被扫盘了
面向中国开发者的远程工作平台
结束北漂后在郑州从事二道贩子的年终总结 -
刚发现飞牛系统出问题了,没用 FNConnet 我
显示全部
|
最新评论
16 条回复
·
594 次点击
11#
povsister
小成
2024-10-17 09:05:27
你这种 case 如果数据量持续上升,应该用 spark 这种离线作业,或者压根不应该拆分服务。
12#
Wh1t3zZ
小成
2024-10-17 09:13:42
流式数据处理
13#
Plutooo
小成
2024-10-17 09:21:12
把 B 服务当成直接从数据库查不也是存在一样的问题么,还是说担心 B 服务的内存占用
14#
landerwong99
小成
2024-10-17 09:34:23
要么就离线近源处理,来个服务直接调 B 库的只读库,
要么就流式处理,使用 kafka 之类的。
15#
ZZ74
小成
2024-10-17 09:41:58
搞那么麻烦干啥,导出文件写入共享目录,调用接口通知 喂 数据我放到 xx 目录下的 x 文件里了
16#
lifei6671
小成
2024-10-17 09:47:03
一般情况下是通过下面方式实现的:
1 、建立只读线下备库,通过从库的方式从线上库实时同步数据,不能用于线上系统读,只能用于线下业务大批量读。
2 、建立只读从库,和主库实时同步,只能进行线上系统只读。
3 、通过 binlog 实时建立分析宽表,一般用来汇总各个业务方数据,建立大宽表,支持线下业务分析已经大批量查询等。
17#
kaf
小成
2024-10-17 09:47:29
流格式数据
1
2
/ 2 页
浏览过的版块
Vue.js
MacBook Pro
React
北京
职场话题
随想
macOS
前端开发
全球工单系统
返回顶部