- 相关博文
- 最新资讯
-
本文介绍基于Java+Flink构建实时风控规则引擎的实践方案。针对传统风控系统规则更新需重启服务、执行效率低等问题，提出采用Flink 1.17.0实现毫秒级风控判断，结合Aviator轻量脚本解析规则，通过Nacos实现规则动态配置与热更新。文章详细阐述了技术选型依据、生产环境配置方案，以及"快、准、灵、稳"四大核心需求的实现方法，提供可直接复用的代码配置和性能优化建议，帮助构建支持10万TPS、规则秒级生效的实时风控系统。
-
- 青云交
- 昨天
-
-
我们知道，基于网络流传播的数据，大多传的都不是原始数据，而是经过序列化后的数据，在到达目的地后，在反序列化成原始数据。kafka也不例外生产者需要用序列化器把对象转换为字节数组进行传播，消费者则用反序列化器把字节数组还原成对象。生产者使用的序列化器和消费者使用的反序列化器是需要一一对应的，如果生产者使用了某种序列化器，而消费者使用了另一种序列化器，那么是无法解析出正确的数据的。
-
- (;_;)(╥ω╥`)
- 前天
-
-
本文介绍了Spark中三个常用Action行动算子的使用方法：1. saveAsTextFile用于将RDD数据保存为文本文件，每个分区保存为单独文件；2. top(num)对RDD元素进行降序排序并返回前num个元素；3. takeOrdered(num)对RDD元素进行升序排序并返回前num个元素。文章分别提供了Java和Scala两种语言的代码示例，演示了这些算子的具体实现方式。这些行动算子都能触发Spark作业执行，将结果返回到Driver端，适用于不同的数据处理场景。
-
- Lansonli
- 昨天
-
-
简单来说，ZooKeeper 是一个开源的、高性能的分布式应用协调服务。它就像是为分布式系统提供的一个“基础设施服务”，专门用来解决分布式应用中常见的协调和管理问题。您可以把它想象成分布式系统的 “管理员” 或 “总控中心”。
-
本文介绍了ClickHouse分布式集群的安装部署流程，主要包括节点规划、JDK和Zookeeper安装、ClickHouse安装配置等内容。节点规划采用3节点集群（node02-04），其中node02作为代理节点。安装前需进行系统参数调优，包括文件数限制调整和SELinux禁用。ClickHouse支持tar和rpm两种安装方式，安装后需创建数据/日志目录并修改配置文件config.xml，配置日志路径、时区、集群信息等，最终搭建一个一分片三副本的分布式集群。所有节点配置需保持一致，特别注意密码设置和权
-
- 吱唔猪～
- 19小时前
-
-
本文详细介绍了使用DataGrip连接Hive的完整流程：1)下载安装最新版DataGrip并配置非商业许可证；2)启动HDFS和HiveServer2服务；3)创建项目并配置Hive数据源连接；4)新建数据库操作。同时提供了常见问题解决方案：注释乱码处理、索引报错忽略、内存溢出调整（修改hive-env.sh配置HADOOP_HEAPSIZE）、JSON表字段显示异常（修改hive-site.xml添加SerDe配置）。最后强调重启服务后需测试连接验证。所有操作默认在atguigu用户下执行。
-
- Gain_chance
- 昨天
-
-
本文详细介绍了Elasticsearch 7.10.0集群的安装配置过程。主要内容包括：1) 准备3个节点(node02-04)的基础环境，包括修改系统参数、创建elastic用户；2) 配置elasticsearch.yml文件，设置集群名称、节点角色、网络参数等；3) 生成TLS证书并分发到各节点；4) 启动集群后设置各系统账号密码；5) 验证集群状态和远程连接。文中提供了完整的配置文件示例和关键操作步骤，特别强调了JVM内存配置原则和集群安全认证配置，最终实现了带密码认证的Elasticsearch集
-
- 吱唔猪～
- 21小时前
-
-
本文介绍了使用Prometheus+Grafana监控Hadoop集群的方法。首先通过jmx-exporter将Hadoop各组件（NameNode、DataNode等）的JMX格式数据转换为Prometheus可识别的格式，配置相应端口暴露指标数据。然后修改Prometheus配置文件，采用基于文件发现的机制自动发现监控目标。最后在Grafana中自定义仪表盘，通过编写PromQL语句实现Hadoop关键指标的可视化监控，包括故障节点数、资源使用率等重要指标。实现从数据采集、格式转换到可视化展示的完整监控
-
- 牛奶咖啡13
- 昨天
-
-
生产环境首选基于 binlog 的 CDC 方案（Debezium/Canal/Flink CDC），核心优势是无侵入、低延迟、高可靠，满足企业级实时数据同步需求，前提是开启 MySQL binlog 并设置为 ROW 格式；工具选择建议分布式架构 / 大数据场景：Debezium + Kafka + Flink（生态完善，支持高并发）；中小规模 / 快速落地：Canal（阿里开源，运维简单）；实时计算一体化：Flink CDC（直接在流处理中捕获和处理变更）；
-
- xixingzhe2
- 昨天
-
-
通过 Docker 启动 PostgreSQL 和 RabbitMQ。• 数据库 URL（PostgreSQL）• 服务器端口（默认：8080）• 消息队列（RabbitMQ）- 启动带热重载的 API。该 API 需要一个。API 通常可以通过。• JWT 加密密钥。
-
- code-ranger
- 13小时前
-
-
-
作为云时代的整合服务商，联想为了加快转型，更是推出了“三级火箭”战略：一级火箭，与专业垂直领域合作伙伴合作，建立智慧数据中心；二级火箭，与微软Azure、VMware、红帽等合作，以及自身在OpenStack方面的自研能力，建立智慧的云世界；三级火箭，建立智慧的行业应用。
-
-
首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视
一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这场盛会，深感荣幸。
-
首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视
一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这项盛会，并感到十分荣幸。
-
活动
-
2021-11-10
-
2021-03-09
-
2020-12-16
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net