- 相关博文
- 最新资讯
-
数据工程师常面临批量处理任务耗时过长、资源利用率低的挑战。当每日增量数据从GB级跃升至TB级，传统MapReduce作业可能需要数小时才能完成。[awesome-data-engineering](https://link.gitcode.com/i/0bac0e9e2adf10435869eaf419f5f4ed)项目收录的Tez与Spark两大框架，通过不同技术路径解决了这一痛点。本文将从架构...
-
- 咎旗盼Jewel
- 前天
-
-
在现代JavaScript开发中，ES模块（ES Module，简称ESM）已成为标准，而`import`/`export`语法则是构建模块化应用的核心。作为连接React Router和Redux的桥梁，[react-router-redux](https://link.gitcode.com/i/7c586d4758321857f82c5b66aab92402)项目的源码结构为我们展示了如何优...
-
- 乔吟皎Gilbert
- 昨天
-
-
大整数无法直接存储在常规变量中，所以要用。字符串的长度可以灵活调整，每个字符对应大整数的一位数字，完美解决了大整数的存储问题。基于字符串的大整数减法，核心思路与一致：从两个数字的末位开始逐位相减，处理借位问题，最后整理结果（去掉前导零、处理负数情况）。
-
数据湖建表语法对比摘要 Hudi、Iceberg、Delta Lake和Paimon四大数据湖框架的建表语法各有侧重： Hudi需明确表类型（COW/MOR）、主键和分区字段，通过USING HUDI和TBLPROPERTIES配置核心属性。 Iceberg强调分区管理，支持显式分区和隐藏分区（GENERATED ALWAYS AS），依赖Spark扩展和Catalog配置。 Delta Lake区分标准表和外部表，通过USING DELTA标识，事务日志自动维护。 Paimon基于Flink SQL，需定
-
- 运维仙人
- 昨天
-
-
本文介绍如何使用Flink CDC实现MySQL到StarRocks的实时数据同步。内容包括：配置Flink Standalone集群并开启Checkpoint；通过Docker Compose部署MySQL和StarRocks环境；在MySQL中创建测试数据表；准备Flink CDC连接器；编写并提交整库同步YAML配置文件；验证DML/DDL操作的实时同步效果；以及演示表路由和分表合并功能。该方案支持Schema变更的自动同步，并提供了端口配置、环境准备等详细说明。
-
- Hello.Reader
- 昨天
-
-
在Hive中实现手机号、身份证号等敏感字段的脱敏，需结合加密技术与权限控制机制。通过以上方案，可在保证数据安全性的同时，实现细粒度的权限控制与高效查询。对无需还原的字段（如分析统计），使用。
-
工业物联网场景中，传感器数据的高效采集与实时处理是核心需求。MQTT协议凭借轻量级、低带宽特性成为设备层理想通信方案，而Spark Streaming提供分布式流处理能力，二者结合可构建高吞吐、低延迟的数据管道。本文将解析该架构的实现原理与实践方案。
-
本文介绍了OpenPI项目的安装与使用指南。首先需克隆仓库并更新子模块（git clone --recurse-submodules）。建议通过wget下载uv依赖管理工具，解压后手动安装。使用uv同步库文件并安装环境（uv sync & pip install）。最后提供了infer.py示例代码，展示了如何加载预训练模型进行推理。注意图片数据需替换为实际输入，运行环境需配置Python Shell。项目依赖uv工具链，部分安装步骤可能需要调整。
-
- luoganttcc
- 20小时前
-
-
这场面试以「内容社区与UGC」为背景，从设计系统架构、定制推荐方案到解决安全问题，循序渐进地考察了求职者的技术能力。内容社区的高并发问题解决方案分布式架构：Spring Cloud 是实现微服务的理想选择。负载均衡：通过 Nginx 或 Kubernetes。缓存技术：Redis、Ehcache。中间件：Kafka、RabbitMQ。数据库优化：分库分表、索引优化。监控：Prometheus、ELK。推荐系统设计热门推荐：通过 Redis存储热门内容。
-
- 吓抖抖
- 昨天
-
-
Hive ACID（原子性、一致性、隔离性、持久性）事务表是 Hive 提供的高级特性，支持在数据仓库环境中执行事务性操作（如插入、更新和删除），确保数据完整性和一致性。以下内容基于 Hive 3.x 版本（推荐使用 Hive 3.1.0 或更高），确保真实可靠。在 Hive 中启用 ACID 事务需要先配置 Hive 服务端和客户端。通过以上步骤，您可以高效管理 Hive ACID 事务表。ACID 事务表支持标准 SQL 操作，但需注意语法和事务管理。以下操作均需在事务上下文中执行（例如，使用。
-
- 浪子回头53
- 前天
-
-
环境准备添加依赖Maven配置需包含以下核心依赖：配置连接参数application.yml配置示例：实体类映射使用@Document注解定义索引映射：Repository接口继承ElasticsearchRepository：自定义查询实现通过RestHighLevelClient实现复杂查询：性能优化建议常见问题解决测试验证编写测试用例验证功能：生产环境建议
-
- rh3shizs
- 昨天
-
-
本文介绍了Kafka 4.1.0集群的部署与架构。主要内容包括：1）采用KRaft协议（无需Zookeeper）搭建三节点集群，详细说明配置参数和启动流程；2）讲解Kafka架构组件，重点说明生产者的消息发送机制（含Spring Boot集成示例）和消费者的分区订阅策略；3）分析Broker存储结构和Topic分区/副本特性。文章还提供了实际部署中的注意事项，如生产者分区策略配置、消费者与分区数匹配等常见问题解决方案。
-
- 会飞的云1024
- 昨天
-
-
在现代PHP开发中，异步编程已成为提升应用性能的关键技术。你是否还在为处理多个API请求时的性能瓶颈而烦恼？是否希望用更优雅的方式管理异步任务的成功与失败？本文将带你深入了解如何通过[gh_mirrors/pr/promises](https://link.gitcode.com/i/29504817ca32a5f5a31f9341801b6237)项目与GuzzleHTTP实现高效集成，让你轻松...
-
- 齐飞锴Timothea
- 昨天
-
-
说出大家认为即将在2020年重磅登场的科技“高光时刻”吧！评论区留言，哪些黑科技会喷薄而出？？？
-
随着数字化的进程，数据的处理、存储和传输得到了飞速的发展。高带宽的需求使得短距互联成了系统发展的瓶颈。受损耗和串扰等因素的影响，基于铜线的电互联的高带宽情况下的传输距离受到了限制，成本也随之上升。而且过多的电缆也会增加系统的重量和布线的复杂度。与电互连相比，基于多模光纤的光互连具有高带宽、低损耗、无串扰和匹配及电磁兼容等问题，而开始广泛地应用于机柜间、框架间和板间的高速互连。
-
-
2020年第一个工作日，“达摩院2020十大科技趋势”发布。这是继2019年之后，阿里巴巴达摩院第二次预测年度科技趋势。 回望2019年的科技领域，静水流深之下仍有暗潮涌动。AI芯片崛起、智能城市诞生、5G催生全新应用场景……达摩院去年预测的科技趋势一一变为现实。科技浪潮新十年开启，围绕AI、芯片、云计算、区块链、工业互联网、量子计算等领域，达摩院继续提出最新趋势，并断言多个领域将出现颠覆性技术突破。
-
随着云计算，大数据和人工智能技术发展，边缘计算发挥着越来越重要的作用，补充数据中心算力需求。计算架构要求多样化，需要不同的CPU架构来满足不断增长的算力需求，同时需要GPU，NPU和FPGA等技术加速特定领域的算法和专用计算。以此，不同CPU架构，不同加速技术应用而生。
-
-
刚刚获悉，腾讯在光网络设备和数据中心领域的两大硬件自研设计“OPC-4”和“TMDC”顺利通过OCP（Open Compute Project）审核并正式接受为官方开源贡献。这是腾讯在硬件领域的开源设计首次被OCP官方正式认可，同时，腾讯也成为中国首家对OCP有开源贡献的互联网公司。
-
作为一家年营收超1000亿美元全球化企业，华为有19万员工且多达1023个办公地点，遍布世界范围内170多个国家并横跨运营商、政企和消费者三大领域的业务规模……如此雄厚财力、庞大架构、繁杂业务，有何可愁？自然是对寻找一款能够支撑企业有效增长以及全球化运作的智能工作平台有高度迫切的需求，这就是华为云WeLink的缘起之因。“确实，WeLink在华为云产品序列中绝对算得上是战略级，我们对此投入了很多。”华为云副总裁、联接与协同业务总裁薛浩说。
-
云+X案例展 | 电商零售类：WakeData助力叁拾加数字化变革
在新零售时代下，各行业都在寻求数字化转型、发展智慧零售模式。而作为新零售的主赛道生鲜行业来说，运营端需要从即时性消费需求出发，加强线下场景布局，提升用户全渠道消费体验。其中水果是生鲜里消费者喜爱程度及消费频次较高的品类，具有很强的互联网基因，但水果行业的数据构成极其复杂，要考虑很多变量，这就需要借助线下大数据构建数字化运营及经营系统。
-
“量子通信”这个专题，解析难度真心有点大。它涉及到量子论、信息论这样的烧脑理论，还关联了密码学、编码学等一堆看着都要绕着走的复杂学科。很多概念，光是看名字，都让人瑟瑟发抖——
-
-
12月23日下午，“AI你—2019亚信科技媒体沟通会”在北京举办，亚信科技（股票代码：01675.HK）执行董事兼CEO高念书，高级副总裁兼公共与政府事务中心总经理陈武，副总裁兼CTO欧阳晔博士，副总裁兼战略与市场中心总经理王力平，与数十位来自党政、财经、IT行业和大众等主流媒体的记者编辑共聚一堂，就亚信科技近年来转型创新成果及未来五年的战略规划等展开深度沟通交流。大家踊跃发言，深度互动，共商发展，共期未来。
-
-
-
今日，华为在北京发布更懂企业的智能工作平台华为云WeLink，并携手合作伙伴成立华为云WeLink生态联盟。 首批加入华为云WeLink生态联盟的伙伴包括（排名不分先后）：金山办公、中软国际、致远互联、罗技、华为商旅、红圈营销、合思费控、Coremail论客、芯盾集团、目睹直播、视源股份、喜马拉雅、为知笔记等。
-
今日，华为云在北京发布智能工作平台WeLink。华为云副总裁、联接与协同业务总裁薛浩表示：“华为云WeLink源自华为数字化转型实践，是更懂企业的智能工作平台，具备智能高效、安全可靠、开放共赢三大核心优势，为政企开启数字化办公智能新体验，助力实现数字化转型。”
-
-
-
-
云+X案例展 | 金融类：金山云为新网银行重塑金融服务提供云计算动力
作为国内第三家、中西部首家互联网银行，新网银行从创立起，就注定将走上一条与众不同之路。按照新网银行高层的话说，“与其说我们是一家银行，不如说我们是一家拿了银行牌照、专注于大数据驱动的金融科技公司”，这无疑是点出了新网银行的特别之处——依靠大数据风控和金融科技能力来驱动业务运营，实现金融和科技的融合。
活动
-
2021-11-10
-
2021-03-09
-
2020-12-16
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net