- 相关博文
- 最新资讯
-
本文详细介绍了Hadoop分布式系统搭建及HBase数据库配置的操作流程。首先通过创建3台虚拟机（v1、v2、v3）完成网络配置和主机名设置，实现v1免密登录其他节点。随后安装配置JDK、Hadoop和Zookeeper环境，包括核心配置文件的修改和环境变量设置。第二部分重点演示了HBase分布式数据库的安装与操作，包括创建major表（含inf和other两个列族）、数据插入/查询/删除操作，以及表结构的修改（设置单元格数目、删除列族、设为只读）和最终的删除验证。整个实验完整展示了从系统搭建到数据库操作的
-
- 无限-无畏
- 昨天
-
-
摘要：本文介绍了使用Anaconda创建Python虚拟环境并部署PySpark任务的完整流程。首先在本地安装Anaconda并创建指定Python版本的虚拟环境（如Python 3.7），调试PySpark脚本确保单机运行正常。然后将虚拟环境打包为zip文件，与脚本一起上传至HDFS。最后通过spark-submit命令提交任务，其中关键配置包括指定虚拟环境路径、Python解释器路径以及各类资源参数（内存、核心数等）。文末还提供了常用Spark参数说明（如driver/executor资源配置）
-
- C.R.xing
- 昨天
-
-
举个例子，如果第一条消息A过期时间30秒，第二条消息B过期时间10秒，即便消息B先过期了，基于RabbitMQ TTL的。3，队列A没有消费者，这样队列A中的消息会在TTL到期时自动经过死信交换机转发到死信队列B。如上所述，消息过期会被转发到死信队列，这样我们可以按照以下步骤实现延迟队列。4，消息会在交换机中等待到达延迟时间后再路由到绑定队列。1，创建普通队列A，设置消息TTL，没有消费者。机制，也是消息A进入死信队列后，才会检查消息B。4，消费者监听死信队列B，实现延迟消费。2，给队列A设置死信交换机。
-
- 秦小郎
- 前天
-
-
本文将介绍Java方向与Elasticsearch(ES)的集成应用。ES是一款分布式搜索分析引擎，具有实时搜索、高性能等特点。文章首先概述ES核心概念如文档、索引、分片等，然后详细讲解Java客户端API的两种类型（低级和高级REST客户端），以及通过Maven添加依赖和配置连接的具体步骤。接着提供了Java操作ES的代码示例，包括创建索引、插入数据和查询数据的关键API使用。全文旨在帮助Java开发者快速掌握ES集成与应用技术。
-
- 编程界的彭于晏qaq
- 昨天
-
- 数据错误
-
针对 Elasticsearch 6.8.23 在 Kubernetes 中运行、每节点 64GB 内存、曾出现 OOM 的情况，分析内存使用过高的原因，并提供一份详细的优化建议清单，内容将包括配置参数建议（如 jvm.options、elasticsearch.yml、limits.conf 以及 Pod 配置）。综上，在每节点64GB可用内存情形下，可以考虑将堆调整到约30GB（Xms=30g, Xmx=30g），剩余约34GB留给操作系统缓存和其他非堆用途。同时，应在容器启动脚本或宿主机设置。
-
- 喝醉酒的小白
- 22小时前
-
-
解决 docx文档 复杂表格合并问题
-
本文介绍了如何在本地部署阿里Qwen3大模型并连接到Elasticsearch实现RAG应用。主要内容包括： 创建Elasticsearch API key获取访问凭证 编写Python代码实现RAG流程，包括Elasticsearch查询、上下文构建和Qwen3模型调用 配置环境变量和证书，确保代码正常运行 测试Qwen3模型接口工作正常 修改代码适配最新Elasticsearch版本的数据结构 最终成功运行示例查询"哪些人在茶会"，Qwen3准确识别出故事中的角色并给出详细回答 文章
- 数据错误
-
函数是组织好的、可重复使用的，用来实现单一、或相关功能的代码段。函数可以提高应用的模块性和代码的可重复性。python 有许多内置的函数比如 print 打印函数，python 也支持用户实现自己的函数，这类函数也称之为自定义函数。定义一个函数需要遵循以下规则：函数代码块以def关键词开头，后接函数标识符名称和圆括号()。任何传入参数和自变量必须放在圆括号中间，圆括号之间可以用于定义参数。函数的第一行语句可以选择性地使用文档字符串 — 用于存放函数说明。函数内容以冒号。
-
- 程序员水冠
- 前天
-
-
基于上述的项目背景和难点， 最终决定采用 Spark，首先数据量大及计算方式复杂， 如果使用传统的服务方式， 需要大量的服务器资源， 而目录不固定， 使数据读取变的复杂， 且普通服务不太可能在 4h 内处理完毕；2、 Drvier 的字节级别代码会分发至将要执行的 Executor 上， 这些计算过程实际上是在每个节点本地计算并完成，每个spark会在集群中有一个或多个Executor，Executor 之间也可能会有数据的传输，比如一些聚合函数执行。过少，并行度不足，任务处理数据量大，影响作业完成时间；
-
- 阳光下是个孩子
- 前天
-
-
让我们以开放的心态拥抱变化，同时保持警惕，确保技术为人类福祉服务。产品个性化率超80%。工业化的特点是批量化、标准化（标品），只有标品，才能批量生产，才能提高效率，降低成本；数字化时代的特点是个性化、定制化（订制品）！5G将覆盖全球90%的人口，6G技术开始试点，实现毫秒级延迟和TB级传输速度。2100年前，人类将在火星建立永久定居点，开启星际殖民时代。22世纪，人类意识将实现数字化上传，实现“数字永生”。面对全球性挑战，人类将成立世界政府，协调各国行动。2045年前，AI将超越人类智能，引发技术奇点。
-
- 文火冰糖的硅基工坊
- 昨天
-
-
面试突击指南：高效备战Java岗位 针对Java面试，建议分三梯队学习：第一梯队（核心必会）包括Java基础、Spring框架、数据库和微服务，需精通原理并能手写代码；第二梯队（竞争力提升）涵盖Docker、Git、Kafka等工具，需熟悉应用场景；第三梯队（加分项）如设计模式、监控工具等，了解概念即可。 突击技巧：整理高频面试题（如String不可变性、Spring事务原理），模拟面试练习，克服紧张。心态上避免完美主义，优先掌握核心技能，遇到不会的问题可引导至熟悉领域。抓重点+实战，足以应对初/中级岗位。
-
- Jasmine65590
- 昨天
-
-
AMD第二代7nm GPU现身：原生支持光追；Facebook曾洽谈收购Fitbit 但谷歌的报价是其两倍……...
极客头条：速递、最新、绝对有料。这里有企业新动、这里有业界要闻，打起十二分精神，紧跟fashion你可以的！ 每周两次，打卡即read 更快、更全了解泛云圈精彩news go go go
-
不久之前，腾讯云刚刚对外上新了一款服务器，号称深度自研且独一无二，其名字也十二分的卡哇伊，叫做“星星海”。晶少虽然还没来得及探寻其名的出处，不过在与腾讯服务器供应链总经理刘裕勋的谈聊中已基本了解到星星海的重要style之一，为云而生。
-
四大开源项目联合发布 腾讯已成Github全球贡献前十公司！
近日在Techo开发者大会上，腾讯正式对四大重点开源项目进行了联合发布，包括分布式消息中间件TubeMQ、基于最主流的 OpenJDK8开发的Tencent Kona JDK、分布式HTAP数据库 TBase，以及企业级容器平台TKEStack。
-
加速布局无服务器生态，腾讯云与Serverless.com达成全球战略合作！
在云计算技术领域，“Serverless（无服务器）”作为一种新型的软件设计架构正在快速崛起。作为继虚拟机、容器后的第三代通用计算平台，Serverless技术也一直是腾讯云原生的重点发力领域。 近日，在由腾讯云主办的首届Techo开发者大会上，腾讯云宣布与全球最流行的Serverless开发平台Serverless.com达成战略合作，成为 Serverless.com的全球战略合作伙伴以及大中华区独家合作伙伴。截至目前，Serverless.com拥有百万级别的活跃应用程序以及50000+的日下载量。
-
邱跃鹏：软硬件一体化、Serverless、智能化是云计算三大趋势
近日腾讯公司副总裁、腾讯云总裁邱跃鹏在“腾讯Techo开发者”大会上致辞。他表示，云计算未来有三大趋势，即软硬件一体化（Cloud Native Hardware）、无服务器计算（Serverless）和智能化（Smart）。
-
正式开源TKE和TBase，腾讯正成为大数据领域开源全面的厂商
在11月6日召开的Techo开发者大会上，腾讯云副总裁、腾讯数据平台部总经理蒋杰博士正式对外披露腾讯大数据平台10年技术演进历程。经过10年的积累，腾讯大数据平台的算力资源池目前已有超过20万台的规模，每天实时数据计算量超过30万亿条，并且随着资源管理平台核心TKE和分布式数据库TBase正式对外开源，腾讯正在成为大数据领域开源全面的公司。
-
首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视
一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这项盛会，并感到十分荣幸。
-
-
戴尔与AMD强强联合：五款PowerEdge服务器 ，让用户无法抗拒的选择
一口气发布5款产品，除了戴尔对于市场的乐观，更来源于对产品的自信，而这份自信则在于与AMD的强强联合。
-
AWS在中国区域放出了一款“重量级”容器服务，名为 AWS Fargate，光环新网运营的 AWS 中国（北京）区域和西云数据运营的 AWS 中国（宁夏）区域均提供该项服务。 据悉这是一款可以适用于 Amazon ECS的计算引擎，主要帮助企业在生产过程中运行容器、却无需部署或者管理服务器，换句话说就是专注设计和构建应用程序，而不用挂心太多基础设施的“那些事儿”。
2019-11-05 -
很多技术人总是抱怨 新技术/新框架/新概念 太多了，总是学不完，抱怨实在是学不动了。哈哈，这不，最近「 中台 」这么火热，要不要停止抱怨，再咬咬牙学一波？ “很多人都担心被技术新潮流所抛弃，所以当遇见不断涌现的新技术时，总是慌忙的去学习。可是其中到底有多少是真正有用的？又有多少是昙花一现的技术呢？当你无法分辨的时候，其实不必慌张，当一项新技术/概念刚出现的时候，你不必匆忙的去学习，更不必担心自己会错过它，如果它是一个真正有价值的东西，是一个真正经受得住考验得技术，它迟早会再次出现在你面前”。
-
边缘计算无论是在市场规模、年均增速还是在实际落地方面，都有可能在TMT计算领域，上演“中心走向边缘，边缘走向中心”的一幕。只不过，对于边缘计算这个相对新鲜的领域，人们对其认知却有很多不当的地方，甚至是严重的误区，这主要表现在五大方面。不夸张地说，边缘计算里的这五个大坑，可能就有你跳过的。
-
是时候展现真正的技术了！4道程序员智力题你能对几道｜ IT巨能唠
程序员对很多人来说那就是个神秘组织，高薪、加班多都是他们的代名词。但是，大家好像还忘了一点，那就是他们也绝对聪明！黑客、代码天才、编程老手……层出不穷，晦涩的计算机难题也是分分钟搞定，想想就令人神往。那想不想试试自己是否也具备成为程序员的潜质呢，下面分享四道程序员面试智力题，请大家务必要大展身手，千万别谦虚～！
-
i 智慧 | 回首30年存储演进之路 再看新数据时代阿里云存储如何革故鼎新？
人类以日新月异的速度刷新着科技的成果，其中存储的发展历史尤其悠久，堪称万年进化史。自文明诞生以来，我们就一直在寻求能够更有效存储信息的方式，从4万年前的洞穴壁画、6000年前泥板上的楔形文字，到今天普及的SSD/闪存，再到对量子存储、DNA存储技术的探索，脚步从未停止。据IDC预测，2025年全球数据将有175 ZettaBytes的总量。如此惊人而又庞大的数据量，为存储市场带来机遇的同时，也带来了不小的挑战。
-
阿里云与MongoDB达成战略合作，成“唯一”；苹果将推出三款5G版iPhone；谷歌正式推出 TensorFlow 企业版……...
嗨，大家好，重磅君带来的【云重磅】特别栏目，如期而至，每周五第一时间为大家带来重磅新闻。把握技术风向标，了解行业应用与实践，就交给我重磅君吧！
-
程序员， 已经渐渐成当代相亲市场的一只主力军。 甚至可以说是“香饽饽”。 越来越多的妹子， 在写择偶要求时， 会说对程序员有好感。 因为他们， 踏实聪明又靠谱， 钱多花花肠子少。 但关于程序员谈恋爱的“笑点”也不少， 一起来看看吧！
-
雪花算法(snowflake) ：分布式环境，生成全局唯一的订单号
snowflake是Twitter开源的分布式ID生成算法，结果是一个long型的ID。 这种方案大致来说是一种以划分命名空间（UUID也算，由于比较常见，所以单独分析）来生成ID的一种算法，这种方案把64-bit分别划分成多段，分开来标示机器、时间等。 其核心思想是：使用41bit作为毫秒数，10bit作为机器的ID（5个bit是数据中心，5个bit的机器ID），12bit作为毫秒内的流水号，最后还有一个符号位，永远是0。
-
“如今网络安全形势错综复杂，解决方案不可能由一家公司独当天下，面对这样的情况，我们就要选择自身擅长的领域发力，其他领域采取模块合作的方式。”在最近举行的2019合肥网络安全大会上，新华三集团高级副总裁、中国区总裁张力对在场媒体表示。
-
据晶少了解，国庆假期后的首个工作日，AWS就在中国区域放出了一款“重量级”容器服务，名为 AWS Fargate，光环新网运营的 AWS 中国（北京）区域和西云数据运营的 AWS 中国（宁夏）区域均提供该项服务。据悉这是一款可以适用于 Amazon ECS的计算引擎，主要帮助企业在生产过程中运行容器、却无需部署或者管理服务器，换句话说就是专注设计和构建应用程序，而不用挂心太多基础设施的“那些事儿”。
-
活动
-
2021-11-10
-
2021-03-09
-
2020-12-16
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net