设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
资源
节点
飞墙
Follow
明白贴
影视
报酬
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
云计算
›
求助:有没有做过物联网、电站的数据同步? ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
社保缴纳基数引发的讨论,表示理解不了
›
车牌摇到号了,无奈手头不宽裕,纠结是买二
›
去马来西亚做计算机靠谱吗?
›
最终还是对开发者下手了🤣
›
北京自如遇到恶心合租室友
今日热议主题
代金券锁券优化方式
G309 右键容易误触,正常吗?
赣南脐橙已经黄了, 11 月 3 号可以摘但是
公司不续签合同不想给补偿
创业的第三款产品,一款可以把日记图片生成
Things3 开启了黑五活动,优惠 30%
M4 的 gpu 比 m3 的 gpu 有提升么?大概提
上海公共户没啥用,确实做到租售同权了
白群晖 ds920 的 m2 缓存位改存储池稳定吗
如何快速从三星手机恢复数据到 iPhone
求助:有没有做过物联网、电站的数据同步?
brant2ai
· 2024-7-23 08:49:28 · 113 次点击
# 电站的数据同步,测点数量达到 150w
## 我们现在在给光伏项目做跨区数据同步,之前没有太多经验,想问问有没有做过类似项目的同学?
## 现在准备用的方案有
1.Ⅰ区通过时序库自带同步能力同步到Ⅲ区时序库中,时序库用 Taos ( TDengine )
2.Ⅲ区另外有数据上报需求,已经有厂商做了Ⅰ区到Ⅲ区的跨区传输,到达Ⅲ区后通过 104 协议转发,再由我们这边解析 104 协议,然后写入时序库中
## 现在的问题
1.Taos 跨区同步的稳定性咋样,能不能支持高达 150w 级别的数据同步能力,之前你们遇到过什么样的坑
2.104 协议解析,我们这边准备拆成 200 多个端口来接收,有没有保稳定性的代码方面的建议
拜托啦各位!!!
举报
·
113 次点击
登录
注册
站外分享
微信扫一扫
QQ分享
微博分享
豆瓣分享
复制链接
显示全部
|
最新评论
9 条回复
沙发
aapon
小成
2024-7-23 08:52:40
数据颗粒度是多少?每秒?还是其他的? 1 区到 3 区的单向透传解决了吗?
板凳
dododada
初学
2024-7-23 08:57:53
跨行业了,不太懂。我们以前的异地多活,数据同步 100G 的内网带宽跑满,用的 log+mq+es ,和你这个完全不一样,而且方案可能已经落伍了
地板
laminux29
小成
2024-7-23 09:25:27
这是入门级别的简单系统架构了,直接使用 2 套负载均衡就行。
第 1 套是基于 DNS 的域名负载均衡,用于异地就近寻找服务器进行数据上报,类似于 CDN 的反向版本。这套需要运营商那边办理 DNS 接入,如果嫌麻烦,不用也行。
第 2 套是用于数据中心内部的数据收集服务器集群的负载均衡,运营商的 DNS 服务器也是这种集群负载均衡模式。
数据中心内部,先用这种便宜量大的数据收集服务器,直接用 cache 类型的 db 进行收集即可。
然后再搞一套用于数据分析处理的集群 db ,最后再来一套备份集群,就达成 3 副本的最低生产要求。
5#
server
小成
2024-7-23 09:33:54
国产化前提下 可选择空间很少, db-engines 榜上的数据库国产化的很少, 自己部署 TDengine 多去翻翻 github issue 绕开坑点,商业版看你们商务谈判了. 如果用建议把源码翻一翻.
6#
zhangeric
小成
2024-7-23 09:55:56
看你们每秒插入得最大得数据量了,看时序数据库支持不支持了.
7#
tulumu
小成
2024-7-23 11:16:38
filebeat2kafka2iceberg/hudi
8#
wizzer
小成
2024-7-23 11:26:01
还好啊,我们是 5s 四条
买 TDengine 企业版,把问题抛给他们即可啊哈哈
9#
HaloLegend
小成
2024-7-23 12:41:56
我们就做这些的,包括 104 协议,但是无奈有保密协议无法分享
10#
fx0719
小成
2024-7-24 00:02:54
以前都买的 PI 数据库
返回顶部