- 相关博文
- 最新资讯
-
LeetCode 300+（重点：DFS/BFS/DP）：如何实现机房故障自动切换，数据同步延迟<500ms？：如何保证MySQL与Redis数据同步？：如何设计支持瞬时高并发的秒杀系统？（Kafka/RocketMQ削峰）（Nginx/Apache动态路由）（适合高并发，但存在时钟回拨问题）：跨服务下单如何保证数据一致性？（先删缓存→更新DB→再删缓存）：如何实现鉴权、限流、日志聚合？定时对账（AWS Lambda）（DB号段缓冲，适合金融场景）（Sidecar代理流量控制）：2N（N=CPU核心数）
-
- 小凡敲代码
- 22小时前
-
-
Elasticsearch集群核心机制解析：分布式架构由节点（Master、数据、协调、Ingest）、分片（主/副本）和集群状态构成，实现水平扩展与高可用。文档写入采用哈希路由和副本同步，搜索请求并行分片查询。保障机制包括心跳检测、分片恢复和防脑裂选举。优化策略含水平扩展、热冷数据分离，生产部署建议专用角色节点分离。故障排查工具包括集群健康检查、任务阻塞定位等。Elasticsearch通过分片、节点、Master和协调层的协同，实现PB级数据的亚秒检索。
-
- 要阿尔卑斯吗.
- 19小时前
-
-
Elasticsearch集群中出现20个节点平分投票（10对10）时，会因未达到法定票数（11票）而陷入脑裂风险，导致主节点缺失、数据不一致和服务中断。主要原因是网络分区或配置不当。解决方案包括：紧急隔离较小节点分区并重启较大分区；长期预防需配置奇数个专用Master节点（如3个）并正确设置法定人数。ES 7.x+版本采用Raft算法可自动处理选举。最佳实践建议物理隔离Master节点并设置监控告警。核心原则是确保可用节点数超过半数，否则系统会停止服务以确保数据一致性。
-
- 要阿尔卑斯吗.
- 19小时前
-
-
下文将简述springboot整合dubbo+zookeeper实现api+provider+consumer模式，Api用于定于interface,provider和consumer依赖Api,provider实现api接口，consumer调用provider。对比api模块增加了qos-enable和qos-port两个属性，QoS是Dubbo提供的运维和管理功能，表示开启；当dubbo-api、dubbo-provider和dubbo-consumer都启动完成后，使用消费者接口访问。
-
- ciku
- 昨天
-
-
然后介绍了使用队列的方法，如果用Java自带的延迟队列DelayQueue，把订单Id+时间戳放在队列，然后while(true)不断轮训队列，这样当订单数据量大的话，也会把队列撑满，且应用重启后数据丢失，所以不合适。在消费者实例加入消费者群组或者分区需要重新分配时，Kafka会根据每个消费者实例的处理能力（例如，每秒处理消息的数量）来动态调整分配。例如，如果一个主题有10个分区，而消费者群组有4个消费者实例，则第一个消费者实例被分配分区0-2，第二个消费者实例被分配分区3-5，依此类推。
-
- 四问四不知
- 昨天
-
-
安装gitlab并启动，使用以下命令进行启动：安装结果如下：通过本地浏览器打开http://localhost:8080，进入页面注册并登陆：增加管理员权限。
-
- Endeavors588
- 昨天
-
-
Flink 自定义函数（UDF）扩展 Table API/SQL 能力，支持标量函数、表值函数、聚合函数和表值聚合函数四种类型，分别用于值转换、数据拆分、聚合计算和分组统计等场景。实现要点包括：继承对应基类（如 ScalarFunction）、实现核心逻辑方法（eval/accumulate）、注册函数并调用。关键技巧涉及类型注解（@DataTypeHint）、参数命名（@ArgumentHint）和确定性声明。UDF 通过 open/close 管理生命周期，支持异步和批量处理优化。
-
-
-
-
-
王坚博士曾经做过这样一个非常形象的比喻，他将做 App 比作是在别人的花园里弄盆栽，「种点花草是没有问题的」，不过「别人叫你的产品下架你就得下架，这是有问题的」，现在在 GitHub 上，众多的开发者显然遭遇了这样的问题。
-
-
刚刚获悉，腾讯在光网络设备和数据中心领域的两大硬件自研设计“OPC-4”和“TMDC”顺利通过OCP（Open Compute Project）审核并正式接受为官方开源贡献。这是腾讯在硬件领域的开源设计首次被OCP官方正式认可，同时，腾讯也成为中国首家对OCP有开源贡献的互联网公司。
-
NVIDIA今日宣布，在NVIDIA GPU Cloud (NGC)容器注册上，向交通运输行业开源NVIDIA DRIVE™自动驾驶汽车开发深度神经网络。
-
11月28日，阿里云正式开源机器学习平台 Alink，这也是全球首个批流一体的算法平台，旨在降低算法开发门槛，帮助开发者掌握机器学习的生命全周期。
-
近日，开源数据库厂商MongoDB与阿里云在北京达成战略合作，作为合作的第一步，最新版MongoDB 4.2数据库产品正式上线阿里云平台。
-
-
-
首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视
一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这场盛会，深感荣幸。
-
四大开源项目联合发布 腾讯已成Github全球贡献前十公司！
近日在Techo开发者大会上，腾讯正式对四大重点开源项目进行了联合发布，包括分布式消息中间件TubeMQ、基于最主流的 OpenJDK8开发的Tencent Kona JDK、分布式HTAP数据库 TBase，以及企业级容器平台TKEStack。
-
正式开源TKE和TBase，腾讯正成为大数据领域开源全面的厂商
在11月6日召开的Techo开发者大会上，腾讯云副总裁、腾讯数据平台部总经理蒋杰博士正式对外披露腾讯大数据平台10年技术演进历程。经过10年的积累，腾讯大数据平台的算力资源池目前已有超过20万台的规模，每天实时数据计算量超过30万亿条，并且随着资源管理平台核心TKE和分布式数据库TBase正式对外开源，腾讯正在成为大数据领域开源全面的公司。
-
首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视
一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这项盛会，并感到十分荣幸。
-
雪花算法(snowflake) ：分布式环境，生成全局唯一的订单号
snowflake是Twitter开源的分布式ID生成算法，结果是一个long型的ID。 这种方案大致来说是一种以划分命名空间（UUID也算，由于比较常见，所以单独分析）来生成ID的一种算法，这种方案把64-bit分别划分成多段，分开来标示机器、时间等。 其核心思想是：使用41bit作为毫秒数，10bit作为机器的ID（5个bit是数据中心，5个bit的机器ID），12bit作为毫秒内的流水号，最后还有一个符号位，永远是0。
-
Q：什么是Spark？A：简单理解，Spark是在Hadoop基础上的改进，是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算，拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法。
活动
-
2021-11-10
-
2021-03-09
-
2020-12-16
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net