- 相关博文
- 最新资讯
-
由于之前已经做了伪分布式配置，在做完全分布式配置之前，需要首先删除master主机hadoop安装路径下的tmp和logs文件夹中的文件：重新配置core-site.xml和hdfs-site.xml，以及mapred-site.xml和yarn-site.xml。（1）首先编辑core-site.xml（2）然后编辑hdfs-site.xml（3）编辑mapred-site.xml（4）编辑yarn-site.xml修改slaves文件压缩hadoop安装文件夹，然后分发到slav.
-
- 盈秋君
- 昨天
-
-
原文编注：近日，中科院院士、清华大学人工智能研究院院长张钹教授接受记者采访时认为，目前基于深度学习的人工智能在技术上已经触及天花板。从长远来看，必须得走人类智能这条路，最...
-
- 大数据周刊
- 2019-09-20
-
-
如何才能快速掌握MYSQL？如何熟悉使用SQL以满足日常工作需求？如果你目前啥也不会，只停留在知道SELECT用于查询的层面的话，又想要快速掌握MYSQL，那么刷题，并且过程中不会什么补什么，就是巩固和提升自己的SQL语言能力最快捷的方法。LeetCode中有不少题是需要Plus会员才能查看并答题的，所以为避免以后会员过期无法再次查看以及加深自身对题目的理解，进行了MYSQL题目的一次大整理。LeetCode上题目众多，而本篇筛选出了LetCode上出现频率最高的50道题目，并且按出现频率由高到低整理
-
- 报告，今天也有好好学习
- 昨天
-
-
前言今天复习Java数据库编程,二话不说MyBatis手把手保姆级教程献上,再也不用担心学不会!资料:链接：https://pan.baidu.com/s/1FIDi_9QiTuhb4x7pksGOUQ提取码：kevf1. MyBatis入门文章目录前言1. MyBatis入门1.1 概述1.2 下载1.3 与JDBC对比1.4 入门案例：搭建环境1.4.1 构建项目1.4.2 数据库和表：User1.5 入门案例：查询所有1.5.1 JavaBean：User1.5.2 编写Dao：Us.
-
- manor的大数据奋斗之路
- 2021-09-25
-
-
openGauss数据库针对NUMA架构进行了很多优化，因此提升了不少效率。那么今天就跟大家聊一聊什么是NUMA？❤️NUMA是一种用于多处理器的计算机存储器设计架构，早起的计算机CPU只有一个核， 随着单核计算能力提升遇到瓶颈，CPU开始使用多个核同时工作，随着核进一步增多，内存总线成为了瓶颈，为了解决这个问题，NUMA架构出现了，那么他是如何解决数据读取时间差异问题并提高效率呢？本期微动画告诉你答案。✌????????????...
-
- Gauss松鼠会
- 前天
-
-
大家好，我是不温卜火，昵称来源于成语—不温不火，本意是希望自己性情温和。作为一名互联网行业的小白，博主写博客一方面是为了记录自己的学习过程，另一方面是总结自己所犯的错误希望能够帮助到很多和自己一样处于起步阶段的萌新。但由于水平有限，博客中难免会有一些错误出现，有纰漏之处恳请各位大佬不吝赐教！博客主页：https://buwenbuhuo.blog.csdn.net/目录前言一、分布式文件系统HDFS1.1 什么是分布式文件系统1.2 HDFS产生背景及定义1.3 HDFS的设计1.4 HDFS的优.
-
- 不温卜火
- 昨天
-
-
在第一季滚雪球学 python 中，我们已经接触了 python 操作 sqlite，本篇博客为你介绍 python 与 mysql 和 nosql 之间的故事。在正式学习之前，先确保你电脑上已经安装了 mysql 。mysql 的安装博客：补充知识：2021年mysql最新windows安装教程，滚雪球学python第四季。mysql 一些简单命令对于 mysql 的细致学习，咱们应该单独开一个系列，这个 flag 先立下了，本文为了学习 python 操作 mysql 数据库，只能先做一些基本
-
- 梦想橡皮擦
- 昨天
-
-
2021年已经过半了，我们所说的“金九银十”也已经过半了，时间晃眼就过去了，有的人为了2021跳槽早早做足了准备，有的人在临阵磨刀，想必屏幕前的你也想在2021年涨薪吧，那么问题来了，怎么才能达到目标呢，不妨跟我来看看为大家盘点整理的一些高频面试问题吧！！！一、Java基础1.Java有哪些数据类型?2.final有什么用?3.介绍下static。4."=="和equals方法究竟有什么区别？5.java中有没有引用传递？6.String s = "Hello";s .
-
- Java分享家
- 前天
-
-
别算出C的十进制再来想怎么转化为二进制，因为，如果C<0，就不好做了。直接一位一位的相加，再进行分类讨论就好了。如果这题n的范围是1e5这种大数据，比赛的时候或许就会想直接按位相加，而不是算出十进制再转化了吧。。。偏偏32<=n<=60，不禁让人想要算出C是多少。思路：如果当前a [ i ] + b [ i ] = 1，则c [ i ] = 1；如果a [ i ] + b [ i ] = 2，就要开始进位了，再来一层循环，从int j = i + 1开始循环，如果 sign
-
- 朴小明
- 前天
-
-
Linux 命令整理更改文件夹所属用户：sudo chown zs:zs module/ software/查看安装的Java版本：rpm -qa | grep -i java删除已安装的Java：rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps切换root用户：su root修改主机IP：vim /etc/sysconfig/network-scripts/ifcfg-ens33修改主机名称：vim /etc/hostname查看主机名称
-
- ZSYL
- 前天
-
-
文章目录1、介绍2、环境准备与部署3、遇到过的坑1、介绍hudi最新的0.9版本经过众人千呼万唤，终于在9月份出来了。hudi可以兼容在hadoop基础之上存储海量数据，不仅可以进行批处理，还可以在数据湖上进行流处理，即离线与实时结合。并且同时提供了2种原生语义：1）Update/Delete记录：即通过hudi可以更新和删除表中记录，同时还提供写操作的事务保证。2）Change Streams：可以从某个时间点获取给定表中已updated/inserted/deleted的所有记录的增量流。
-
- 追风筝的少年-
- 昨天
-
-
每日更新公众号文章，是一件枯燥且累的事情，要坚持下来，短期需要意志力和未来前景打鸡血，从长期来看，最重要的是一定要形成一套自己的写作套路。作为一名兼职公众号主，写公众号文章算是我的副业，我面临着每日更新文章的时间有限，但文章又需要完整的思考时间，碎片化时间的利用度低，同时，我也是一名母亲，需要兼顾家庭。最最重要的是，文章要有内容，有态度，有观点，还要有专业。为了写好公众号文章，我不断总结过往，今天给大家分享下我的经验。坚持。要有清晰的目标，并为之付出努力，坚持下去，心态平和，只要在输出文章，总是对
-
- Dr_ginger
- 前天
-
-
文章目录1. 简述hadoop1与hadoop2 的架构异同2. 请介绍一下hadoop的HDFS3. Hadoop的运行模式有哪些4. Hadoop生态圈的组件并做简要描述5. 解释“hadoop”和“hadoop生态系统”两个概念6. 请介绍HDFS的组成架构7. HDFS的文件块大小有什么影响8. HDFS的写（上传）数据流程9. 机架感知（副本存储节点选择策略）10. HDFS的读数据流程11. NN 和 2NN 工作机制（元数据持久化机制）12. Fsimage 和 Edits中的内容13. Na
-
- 雷恩Layne
- 2021-09-25
-
-
0.前言最近有好几个朋友都有咨询这个问题，大概有两类：1、为啥我用了with..as效率没有提高？2、sql跑不动，改成with..as的写法，会不会更好些？网上博客几乎都有结论with ... as语句会把数据放在内存：一1.1、Hive-SQL在hive中有一个参数hive.optimize.cte.materialize.threshold这个参数在默认情况下是-1（关闭的）；当开启（大于0），比如设置为2，则如果with..as语句被引用2次...
-
- Impl_Sunny
- 前天
-
-
-
-
-
-
王坚博士曾经做过这样一个非常形象的比喻，他将做 App 比作是在别人的花园里弄盆栽，「种点花草是没有问题的」，不过「别人叫你的产品下架你就得下架，这是有问题的」，现在在 GitHub 上，众多的开发者显然遭遇了这样的问题。
-
-
刚刚获悉，腾讯在光网络设备和数据中心领域的两大硬件自研设计“OPC-4”和“TMDC”顺利通过OCP（Open Compute Project）审核并正式接受为官方开源贡献。这是腾讯在硬件领域的开源设计首次被OCP官方正式认可，同时，腾讯也成为中国首家对OCP有开源贡献的互联网公司。
-
NVIDIA今日宣布，在NVIDIA GPU Cloud (NGC)容器注册上，向交通运输行业开源NVIDIA DRIVE™自动驾驶汽车开发深度神经网络。
-
11月28日，阿里云正式开源机器学习平台 Alink，这也是全球首个批流一体的算法平台，旨在降低算法开发门槛，帮助开发者掌握机器学习的生命全周期。
-
近日，开源数据库厂商MongoDB与阿里云在北京达成战略合作，作为合作的第一步，最新版MongoDB 4.2数据库产品正式上线阿里云平台。
-
-
-
首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视
一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这场盛会，深感荣幸。
-
四大开源项目联合发布 腾讯已成Github全球贡献前十公司！
近日在Techo开发者大会上，腾讯正式对四大重点开源项目进行了联合发布，包括分布式消息中间件TubeMQ、基于最主流的 OpenJDK8开发的Tencent Kona JDK、分布式HTAP数据库 TBase，以及企业级容器平台TKEStack。
-
正式开源TKE和TBase，腾讯正成为大数据领域开源全面的厂商
在11月6日召开的Techo开发者大会上，腾讯云副总裁、腾讯数据平台部总经理蒋杰博士正式对外披露腾讯大数据平台10年技术演进历程。经过10年的积累，腾讯大数据平台的算力资源池目前已有超过20万台的规模，每天实时数据计算量超过30万亿条，并且随着资源管理平台核心TKE和分布式数据库TBase正式对外开源，腾讯正在成为大数据领域开源全面的公司。
-
首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视
一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这项盛会，并感到十分荣幸。
-
雪花算法(snowflake) ：分布式环境，生成全局唯一的订单号
snowflake是Twitter开源的分布式ID生成算法，结果是一个long型的ID。 这种方案大致来说是一种以划分命名空间（UUID也算，由于比较常见，所以单独分析）来生成ID的一种算法，这种方案把64-bit分别划分成多段，分开来标示机器、时间等。 其核心思想是：使用41bit作为毫秒数，10bit作为机器的ID（5个bit是数据中心，5个bit的机器ID），12bit作为毫秒内的流水号，最后还有一个符号位，永远是0。
-
Q：什么是Spark？A：简单理解，Spark是在Hadoop基础上的改进，是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算，拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法。
活动
-
2021-03-09
-
2020-12-16
-
2021-01-31
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net