- 相关博文
- 最新资讯
-
hadoop 集群，负责资源的管理和调度组件HDFS 操作：使用 hadoop fs 命令查看文件（查看文件名称、文件的大小等）Hive 中数据的存储格式，了解每一种存储格式的适合存储什么样的类型的数据Linux 中权限的设置，如：使用命令给目录或文件赋予可读可写的权限SSH 生成免密登录使用的密钥MapReduce 过程中，map 阶段、reducer 阶段，采用技术 shuffle 的作用是什么HDFS 包括 namenode、datanode 各自负责什么。
-
- 林间码客
- 昨天
-
-
从map输出开始，传送map输出到Reduce作为输入的过程，对同一个map中输出的键相同的数据先进行整合，减少传输的数据量，并将数据按键排序。NameNode层面：DataNode向NameNode上报块信息，NameNode更新元数据，返回成功响应给客户端。4)流水线写入完成后，如何知道写入成功（从namenode和datanode两种节点）NameNode：管理文件系统命名空间，存储元数据（文件目录树、文件块映射），记。3)将数据加载到对应分区（加载数据既可以从本地加载，也可以从HDFS上加载）
-
- 林间码客
- 昨天
-
-
本文介绍了一个完整的岗位供需统计分析系统，该系统整合了招聘网站数据，通过数据采集、清洗、统计分析和智能预测等环节，构建了一个包含可视化展示、后台管理和薪资预测功能的应用闭环。系统采用Flask框架搭建后台，结合Spark进行批量数据处理，使用CatBoost模型实现薪资预测，并通过ECharts实现多维度的数据可视化。文章重点阐述了系统的整体架构、数据处理流程、统计分析方法、预测模型实现以及后台管理功能，并提出了后续扩展方向。该系统不仅展示了技术整合能力，更注重数据的实际应用价值，为求职者、企业和学校提供了
-
- 王小王-123
- 22小时前
-
-
reflog全称 reference log，是本地仓库独有的引用移动日志，保存在.git/logs目录，不会同步到远程仓库。commitresetcheckoutmerge等，哪怕提交被回退、删除、分支丢弃，只要日志未过期（默认 90 天垃圾回收），都能找回丢失提交。Git reflog 是源码泄露类题核心，记住查看日志、切换历史提交两步拿 flag；HTTP 头伪造是 Web 签到题常客，XFF、Referer、UA 三种伪造务必熟练；
-
- 霜序词
- 22小时前
-
-
宝塔面板安装RabbitMQ时出现short read: expected 1614869 bytes but got 0: unexpected EOF错误，主要原因是Docker Hub官方源网络不稳定导致镜像拉取中断。解决方案包括：1) 配置国内Docker镜像加速器（推荐）；2) 清理Docker缓存与残留文件；3) 限制Docker下载并发数；4) 手动拉取镜像并部署。同时需注意检查服务器防火墙设置、端口开放情况及磁盘空间是否充足。国内服务器环境下，使用镜像加速器是最有效的解决方法。
-
- ＿Happy
- 昨天
-
-
本文承接上篇，继续梳理 2026 年 AI/LLM 的进阶工程概念，包括 Prefill / Decode、RLVR、Test-time Compute、Thinking Budget、Speculative Decoding、GraphRAG 和 Worktree。文章从原理、实现和实践建议出发，解释大模型如何提升推理速度、分配计算预算、利用可验证反馈训练、结合图结构增强检索，以及在 AI Agent 开发中隔离并行任务，帮助读者建立从“听懂概念”到“理解工程应用”的整体认知。
-
- 小面包狗
- 昨天
-
-
《智能问数系统中的数据权限隔离设计》摘要： 本文针对智能问数系统出现的跨部门数据越权访问问题，提出了一套三层权限防护方案。当运营人员意外查看到财务成本数据后，分析发现传统表级权限控制存在漏洞，需细化到列级管控。解决方案包含：1）基础组织隔离层，通过org_code自动过滤行级数据；2）表级白名单控制，按角色限制可访问表范围；3）列级敏感字段脱敏，实现同表不同字段的差异化权限。系统采用多源组织信息获取机制（显式参数>请求头>默认值）并建立友好的权限拒绝提示，在保障数据安全的同时优化用户体验。当权限解析异常时，
-
- 陆水A
- 昨天
-
-
高炉数据采集与实时监控体系摘要 本期内容聚焦高炉智能化中的数据采集与监控系统建设。文章首先提出构建"高可靠、高实时、高精度"的数据采集体系，通过分层的体系架构（现场设备层-边缘采集层-数据传输层-时序数据库层）实现全方位数据采集。系统采用多种采集协议（OPC-UA、Modbus TCP、MQTT）和边缘计算技术，结合Kafka消息队列实现高效数据传输，并利用InfluxDB等时序数据库存储不同类型数据。来自华北理工大学段一凡的博客文章
-
- 段一凡-华北理工大学
- 前天
-
-
Kafka 高可用架构的核心是在副本可靠性、事务一致性和吞吐性能之间找到平衡。落地路线建议如下：第一，副本策略分级。核心业务 Topic 使用 3 副本 +acks=all，日志类 Topic 可以使用 2 副本 +acks=1。一刀切的高配会浪费资源。第二，事务按需启用。仅在跨分区原子写入和消费位移原子提交场景下启用事务。单分区内去重使用幂等生产者即可，避免不必要的事务开销。第三，消费者端必须幂等。即使启用了 Exactly-Once 语义，消费端仍需实现幂等。
-
- Dicky张
- 前天
-
-
本文介绍了低碳高炉智能化系统的五层架构设计（感知层、边缘层、平台层、应用层、决策层）及其关键技术要点。系统通过传感器网络实时采集高炉运行数据，经边缘计算处理后上传至云平台，利用AI算法实现能耗优化、碳排管控等智能应用，最终支撑生产决策。文章详细列出了温度、压力、流量等各类传感器的选型参数和部署位置，并采用流程图和分层图示直观展示了系统数据流向和整体架构，为钢铁企业低碳转型提供了完整的技术路线图。来自华北理工大学段一凡的博客文章
-
- 段一凡-华北理工大学
- 前天
-
-
综合来看，不同AI工具在股票信息处理与研究辅助中各有适配场景，不存在通用万能的工具。其中扣子app凭借多Agent协作、项目空间整合、全流程资料沉淀、多端同步的能力，适配投资者长期、系统化的股票研究与复盘需求，是统筹全流程研究资料的核心工具；Kimi、DeepSeek、Perplexity分别深耕长文本解析、实时资讯整合、精准信息检索场景；ChatGPT、夸克AI适配内容梳理与新手基础研究；Power BI与酷表ChatExcel则分层覆盖专业与轻量化数据处理需求。各类工具仅用于。
-
- Lzn0907
- 17小时前
-
-
摘要 本文记录了一个完整的MySQL实时数据同步实践过程，通过Canal+RabbitMQ实现数据变更监听和转发。作者在macOS环境下部署了MySQL 8.0.45并开启binlog，配置Canal 1.1.7进行数据抓取。实践过程中发现Canal 1.1.x版本存在RabbitMQ直连模式的严重bug（无法正确设置exchange类型），最终采用TCP模式+Spring Boot客户端中转方案成功解决问题。方案包含Canal TCP模式监听、Java客户端处理和RabbitMQ消息投递三个环节，提供了核
-
- 總鑽風
- 昨天
-
-
页面自带下拉框，不能直接在创建任务弹窗上传本地权重；但可以提前把私有/自制模型存入持久化存储，训练脚本读取使用。
-
- zhangfeng1133
- 20小时前
-
加载中...
-
看完这一篇，你就对 Spring Security 略窥门径了
开发Web应用，对页面的安全控制通常是必须的。比如：对于没有访问权限的用户需要转到登录表单页面。要实现访问控制的方法多种多样，可以通过Aop、拦截器实现，也可以通过框架实现，例如：Apache Shiro、Spring Security。我们这里要讲的Spring Security 就是一个Spring生态中关于安全方面的框架。它能够为基于Spring的企业应用系统提供声明式的安全访问控制解决方案。
活动
-
2021-11-10
-
2021-03-09
-
2020-12-16
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net