设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
节点
飞墙
Follow
明白贴
工算小助手
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
Java
›
请教下微服务间大批量数据获取一般是如何处理的 ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
AI 都那么强了,传统的学校教育价值是不是
›
同事刮刮乐中了 100 万
›
同事用了 cc 直接一把梭,现在让我改 bug,
›
请教各位什么是技术管理?忙一年发现没干技
›
结束北漂后在郑州从事二道贩子的年终总结 -
今日热议主题
现在函授专升本难度真是变态级,有需要的抓
求个多邻国的车位
收一个京东家政,长沙
新手上手指南:写好提示词,让 Kling3 生成
[武汉] 锂钠氪锶科技消费者业务线节前最后
Linux .do 是不是长期不登录自动删号
峰哥为啥被封了呢
大家如何看待最近公布的爱泼斯坦文件?
[招产品/深圳/1~3 年经验]
诚招 Solana 智能合约工程师, 兼职或全职
显示全部
|
最新评论
16 条回复
·
599 次点击
11#
povsister
小成
2024-10-17 09:05:27
你这种 case 如果数据量持续上升,应该用 spark 这种离线作业,或者压根不应该拆分服务。
12#
Wh1t3zZ
小成
2024-10-17 09:13:42
流式数据处理
13#
Plutooo
小成
2024-10-17 09:21:12
把 B 服务当成直接从数据库查不也是存在一样的问题么,还是说担心 B 服务的内存占用
14#
landerwong99
小成
2024-10-17 09:34:23
要么就离线近源处理,来个服务直接调 B 库的只读库,
要么就流式处理,使用 kafka 之类的。
15#
ZZ74
小成
2024-10-17 09:41:58
搞那么麻烦干啥,导出文件写入共享目录,调用接口通知 喂 数据我放到 xx 目录下的 x 文件里了
16#
lifei6671
小成
2024-10-17 09:47:03
一般情况下是通过下面方式实现的:
1 、建立只读线下备库,通过从库的方式从线上库实时同步数据,不能用于线上系统读,只能用于线下业务大批量读。
2 、建立只读从库,和主库实时同步,只能进行线上系统只读。
3 、通过 binlog 实时建立分析宽表,一般用来汇总各个业务方数据,建立大宽表,支持线下业务分析已经大批量查询等。
17#
kaf
小成
2024-10-17 09:47:29
流格式数据
1
2
/ 2 页
浏览过的版块
二手交易
酷工作
Linux
生活
硬件
职场话题
程序员
情感问题
微信
宽带症候群
返回顶部