- 相关博文
- 最新资讯
-
刚提交完代码，才发现把请求上限从 20 写成了 999。修改不能全丢，提交又不应该留在当前分支：搜到的命令有 reset、revert，后面还跟着 soft、mixed、hard。它们都叫“撤销”，执行后的文件却完全不同。更麻烦的是，同事可能已经拉取这次提交，个人电脑上的回退会变成协作问题。这篇教程用同一个 limits.txt 做三组独立实验：撤销最后一次提交但保留代码、给错误提交做反向提交，以及找回日志中看不见的旧提交。练习只操作新建的本地仓库，不连接远程，也不执行硬重置。
-
- 10mAh
- 9小时前
-
-
Apache Hive是基于Hadoop的开源数据仓库，支持类SQL查询（HQL），可将HQL自动转化为MapReduce任务，实现对海量数据的分析。其架构分为四层：用户接口层（CLI/JDBC/ODBC）、元数据存储层（Metastore，通常用MySQL）、核心驱动层（Driver，负责解析、优化并生成执行计划）和底层执行环境（HDFS、YARN与MapReduce）。用户提交HQL后，Driver通过Metastore获取元数据，经解析、优化后生成物理计划，由YARN调度在MapReduce上执行，最
-
- yyk33324
- 14小时前
-
-
本项目基于Hadoop+Spark构建低能见度事件监测分析系统，利用PySpark对深圳市气象局能见度数据进行清洗、聚合与建模，实现站点对比、时序演变、等级分布、日内节律、波动特征及风险洞察等多维度分析。通过Django与Vue实现可视化大屏展示，结合Echarts动态呈现结果。部分功能已演示，完整方案可咨询获取。
-
- Q2643365023
- 昨天
-
-
漏扫报告高危项：YARN RPC 未授权访问可远程执行代码，HDFS/YARN 页面裸奔。本文实战不改 Hadoop、不引入 Kerberos 的修复路径：firewalld 白名单隔离集群互信，Nginx 反向代理统一入口并加 Basic Auth，附完整防火墙命令、nginx.conf 逐段讲解（upstream 主备、subs_filter 改写 NM 链接）与六个真实踩坑。
-
- Sayai
- 13小时前
-
-
同一份机组数据进平台后，往往会被提出几种完全不同的要求：运维看板要立即拿到当前值，工程师要回看故障前后的明细，报表要按小时汇总多个设备，数仓还要扫描更长时间范围的数据。只测连续写入和单点查询，很难回答这些需求能不能同时满足。从大数据平台角度做选型，时序库不只是一个写入端点。它要承接在线查询，也要和历史分析、保留策略、消息接入及运维流程配合。更实用的做法，是先列出真实查询，再检查数据从哪里进、在哪里留、由谁计算。
-
- 一只牛博
- 20小时前
-
-
把 475 GiB 的 DeepSeek-V4.1-Flash 迁到单台 DGX Spark（GB10，121.6 GiB 统一内存）的实录。UMA 下 host 与 device 共享内存，"卸载"失效，官方多卡方案无法照搬。受开源项目 Strata"大表放 SSD、从不驻留"启发，从"不可行"翻案，移植三层内存架构并补齐 Engram、CSA2、多模态等模块。文本路径与官方实现逐位一致，多模态经官方示例图验收答对，单会话约 3.3 tok/s。
-
- redhat77
- 前天
-
-
Spring Boot 4.0 移除对 Undertow 的官方支持，因后者未适配 Servlet 6.1。项目需迁移到 Tomcat 或 Jetty，修改依赖并清理 server.undertow.* 配置。建议优先使用默认的 Tomcat，确保 Java 17+，并通过压测验证性能。虽可自行维护 Undertow 集成，但非官方支持，长期成本高。升级关键：改依赖、删配置、回归测试，确保稳定性。
-
- java1234_小锋
- 昨天
-
-
批量推理、多模态预处理等长作业失败后，可以通过 Ray Data checkpoint 保留已提交的处理进度。重新提交同一个作业时，系统在读取输入后过滤已提交 ID，继续计算剩余记录。
-
- 阿里云大数据AI技术
- 23小时前
-
-
本文介绍如何利用法国公共数据集BANO（国家地址数据库）在本地构建地址信息丰富系统。针对地址数据不完整或格式混乱的问题，作者通过Shell脚本下载并解析BANO的CSV文件，使用Logstash将数据导入Elasticsearch，实现地址标准化、地理坐标映射及反向地理编码。通过自定义分析器与索引模板，支持模糊搜索、同义词处理和多省份聚合。最终，1640万条地址数据被成功加载，可在Kibana中可视化分布，为邮件投递、客户定位等场景提供高效、隐私安全的解决方案。
-
入口限流保护整体容量；Redis 原子操作处理热点库存预扣；Kafka 异步削峰，降低数据库瞬时压力；幂等设计与数据库唯一约束防止重复订单；重试、死信、补偿和对账处理跨系统故障；监控、链路追踪和压测支持持续治理。面试时不仅要说方案，还要解释方案的边界、失败窗口和恢复方式。尤其要记住：Redis Lua 只能保证 Redis 内部原子性，Kafka 事务不能自动覆盖数据库与 Redis，补偿操作本身也必须幂等。
-
- S_uly
- 22小时前
-
-
Flink 2.3 将 Model 作为与 TABLE、FUNCTION 并列的 Catalog 一等公民，实现模型的持久化、共享与治理。通过 CREATE MODEL 统一抽象远程推理服务，type=remote 与 task 实现对千差万别模型的统一调用。Provider 机制解耦 Flink 与具体模型，支持内置与自定义扩展。模型与作业解耦，注册即治理，提升可维护性与复用性。
-
- 俊哥大数据
- 昨天
-
-
这类工作围绕客户、供应商、商品、机构等基础对象，整理字段定义、编码规则、重复记录和维护责任。例如，同一家供应商在采购系统和财务系统有不同名称，可能影响付款核对。治理人员既要识别重复数据，也要与采购、财务确认合并规则。大数据管理与应用专业的优势在于理解流程与数据之间的关系。短板往往是数据库实践不足，或不熟悉真实业务单据。准备时应同时补业务流程和SQL查询。
-
- cc572502653
- 昨天
-
-
Flink CDC 写入 Iceberg 时，02-raw 目录混入 equality-delete Parquet 文件，导致清洗程序误将仅含 id 的删除标记识别为无效空行。问题根源在于清洗侧未区分数据文件与删除控制文件，合并 Schema 后补 NaN 引发误判。修复方案：读取 Parquet key_value_metadata，识别 delete-type=equality 或 delete-field-ids 存在即跳过删除文件，确保仅业务数据进入清洗流程。此法不改变现有规则，可精准排除 del
-
- @小匠
- 22小时前
-
-
10月7日，旧金山。微软Windows AI和Surface活动上，黄仁勋与纳德拉罕见同台。两人一起宣布了一件酝酿半年的产业事件：搭载英伟达RTX Spark超级芯片的笔记本即日起开放预购，10月16日开售；紧凑型桌面主机11月上市。图1：黄仁勋在发布会现场手持RTX Spark超级芯片过去几年，英伟达的AI版图集中在数据中心，RTX Spark是它第一次把完整的AI算力栈搬进大众Windows设备。用黄仁勋的话说，这是"把33年积累浓缩进一颗芯片"。Agent PC这个品类，从概念正式走向货架。
-
- 张星河zen
- 前天
-
-
提到MySQL的事务，我相信对MySQL有了解的同学都能聊上几句，无论是面试求职，还是日常开发，MySQL的事务都跟我们息息相关。
-
随着业务的发展，MySQL数据库中的表会越来越多，表中的数据量也会越来越大，相应地，数据操作的开销也会越来越大；另外，无论怎样升级硬件资源，单台服务器的资源（CPU、磁盘、内存、网络IO、事务数、连接数）总是有限的，最终数据库所能承载的数据量、数据处理能力都将遭遇瓶颈。
-
MySQL 狠甩 Oracle 稳居 Top1，私有云最受重用，大数据人才匮乏！ | 中国大数据应用年度报告...
科技长河，顺之者昌，错失者亡。在这个技术百态之中，中国专业的 IT 社区CSDN 创始人&董事长蒋涛曾多次在公开活动中表示，开发者是对技术变革最敏感的人群。这不仅源于开发者、工程师创建了助力这个时代蜕变的工具，他们还极具前瞻性地缔造了真实世界之外的虚拟、数字化世界。
-
“删库跑路”这个词儿，经常被挂在嘴边当玩笑，是因为大家都知道，一旦真的发生这样的事情，企业损失是无比惨重的。
-
华为云TaurusDB计算存储分离架构：让数据“身”分离，“心”凝聚
在2019年HC大会上，华为重磅推出最新一代高扩展海量存储分布式数据库——TaurusDB，它拥有一个最大的特点就是将存储和计算以一种分离的架构形式运行。很多人就会问到，华为云为什么会设计这款产品？核心竞争力是什么？对比原生MySQL的优势有哪些？借此时机，CSDN记者有幸采访到了华为云TaurusDB数据库资深技术专家，现在就请他来为我们一一解答。
-
CSDN云计算「C课有道」栏目趁着这股技术风潮再次如期而至啦！秉承「门门有路，路路有门」的理念，这次CSDN云计算小分队特邀阿里云、腾讯云、青云、天云等企业内的“国宝级”架构师，共同打造了一款数据库系列进阶教程，效果绝堪比“红宝书”。 从数据库宏观发展入手，内容主要涉及云数据库为代表的非关系型数据库、MySQL数据处理、分布式等诸多技术要点，将造福开发者设置为终极指标，纯技术绽放的精彩无限，实在不容错过。
活动
-
2021-11-10
-
2021-03-09
-
2020-12-16
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net