abcfyk 最近的时间轴更新 abcfyk 最近的时间轴更新
ummm.me
CN
abcfyk 最近回复了
18 天前 回复了 newbee2000 创建的主题 › Apple › 想购买 iPhone16 系列的，建议看看爱否的评测，是我认为目前最公正客观的了 |
@ViolaH #69 瞧你这话问的， 以色列不是已经把所有不支持他们的人都 标记成哈马斯了吗？
19 天前 回复了 3country 创建的主题 › 问与答 › 已经交了 2W 定金，要不要放弃买房？ |
单价 8700 ，面积 133 ，总价不是 115W 么？ 计算器算出来的结果也是 115W ，怎么总价是 130W ？
29 天前 回复了 dreamkuo 创建的主题 › 问与答 › 早年说的云手机,现在有没有技术方案,落实的方案. |
@1145148964 #4 他说的是局域网“串流”
39 天前 回复了 wqq096737ink 创建的主题 › 美酒与美食 › 有什么好吃的月饼推荐吗? |
一般吃广州酒家和美心。 冰皮的月饼最好吃
40 天前 回复了 abcfyk 创建的主题 › 分享发现 › 分享： CPU 与显卡的 [瓶颈效应] 确实存在 |
41 天前 回复了 marqueriteparler 创建的主题 › 问与答 › 电脑主机配置 求老哥帮忙看下这样合理吗 |
钱基本都花在了刀把上
49 天前 回复了 dzdh 创建的主题 › 问与答 › 针对大规模数据集的频繁的定时任务处理。有什么高性能方案吗？ |
@dzdh #10 那这太简单了，用 flink/spark streaming 统计结果， 批量更新数据库
49 天前 回复了 dzdh 创建的主题 › 问与答 › 针对大规模数据集的频繁的定时任务处理。有什么高性能方案吗？ |
大的解决方案路线分两种，
一种是后端技术栈内实现， 比如 Java+MySQL （假设）。 关注点是 数据库性能、索引设计、程序设计
一种是依赖大数据技术实现， 使用 6L 建议的 Spark/Flink 这种技术实现，关注点就是 数据同步（也可不同步）、数据准确性
一种是后端技术栈内实现， 比如 Java+MySQL （假设）。 关注点是 数据库性能、索引设计、程序设计
一种是依赖大数据技术实现， 使用 6L 建议的 Spark/Flink 这种技术实现，关注点就是 数据同步（也可不同步）、数据准确性
49 天前 回复了 dzdh 创建的主题 › 问与答 › 针对大规模数据集的频繁的定时任务处理。有什么高性能方案吗？ |
解决方案太多了。但是你提出要求比如“尽快的、容错率高的、支持重复执行的、能应对频繁场景” 全是废话， 如果想要别人给出可用的解决方案，那就在需求层面描述清楚比如：
业务表的存储是什么？ 读写频率是多少？ 配置是什么？有类似主从、集群的配置吗？
凌晨整点要批量检查这些数据的某些状态进行对应操作 的 [操作] 指的是表内数据操作 还是 关联业务表操作？ 大概单条操作耗时是多少？
数据分布情况是怎么样的？分批处理的可行性如何？对数据准确性的要求如何？
业务表的存储是什么？ 读写频率是多少？ 配置是什么？有类似主从、集群的配置吗？
凌晨整点要批量检查这些数据的某些状态进行对应操作 的 [操作] 指的是表内数据操作 还是 关联业务表操作？ 大概单条操作耗时是多少？
数据分布情况是怎么样的？分批处理的可行性如何？对数据准确性的要求如何？
Select Language