• 相关博文
  • 最新资讯

  • Hadoop集群搭建(步骤图文超详细版)

    选择理由，精准屏蔽

    一、前置条件需要安装下载方法Vmware Workstation官网下载链接Centos7系统百度网盘下载 ， 提取码：t6vajdk1.8官网下载链接MobaXterm百度网盘下载，提取码：f64vhadoop官网下载链接(最新)二、安装Centos系统三、配置Centos系统静态IP（很重要！）这里我之前的文章写过，这里就不详细讲了，有需要的可以看看我这篇文章：配置教程注意：不配置的话Centos系统无法连网
    huisoul
    HuiSoul
    昨天
    阅读数 431
    评论

  • 5万成员丨CSDN 大数据领域网红社区！

    选择理由，精准屏蔽

    一、社区愿景我的梦想很大，大到致力于打造大数据领域第一社区，赋能中国技术社区蓬勃发展。我的“格局”很小，小到每一篇优质文章，都会不吝啬加精，置顶。
    weixin_39032019
    不吃西红柿丶
    昨天
    阅读数 1240
    评论

  • Overloaded method foreachBatch with alternatives

    选择理由，精准屏蔽

    前言本文隶属于专栏《Spark异常问题汇总》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！本专栏目录结构和参考文献请见 Spark异常问题汇总正文问题描述Spark 编译报错：Error:(34, 25) overloaded method foreachBatch with alternatives: (function: org.apache.spark.api.java.function.VoidFunction2[org.apache.spark.sq
    Shockang
    Shockang
    昨天
    阅读数 180
    评论

  • Elasticsearch(一) 安装和配置启动

    选择理由，精准屏蔽

    前言: 本环境在阿里轻量级服务器(Ubuntu)上 执行(一) 环境搭建1.1 java环境环境：ES 为 java 语言编写， 需要有 java 环境版本说明：ES 5 需要 Java 8 及以上的版本ES 7 开始内置了 Java 环境apt updateapt install default-jre // 下载jdk环境验证输入: java --version 返回以下代码算成功1.2 Elasticsearch下载通过官方下载地址挑选你喜欢的下载包下载地址: h
    weixin_44544813
    king丶绝世佳友
    前天
    阅读数 391
    评论

  • 数据采集与清洗基础习题（四）Pandas初体验，头歌参考答案

    选择理由，精准屏蔽

    数据采集习题参考答案，会持续更新，点个关注防丢失。创作不易，一键三连给博主一个支持呗。为了方便查找，已按照头歌重新排版，朋友们按照头歌所属门类查找实训哦，该篇为Pandas。文章目录实训一：Pandas初体验第一关：了解数据处理对象--Series编程要求Pandas中的数据结构第一关答案第二关：了解数据处理对象-DataFrame编程要求相关知识第二关答案第三关：读取CSV格式数据编程要求相关知识第三关答案第四关：数据的基本操作——排序
    qq_48774513
    饲养猿
    昨天
    阅读数 418
    评论

  • SpringBoot基于Zookeeper和Curator生成唯一ID

    选择理由，精准屏蔽

    目录一、简介二、maven依赖一、简介  在分布式系统中，为了保证同一时间只能由一个客户端对共享资源操作，我们通常采用加锁来实现，常见有三种方式：基于数据库实现的分布式锁基于zookeeper实现的分布式锁基于redis实现的分布式锁  而在使用redis实现时Redisson是官方推荐的一种方案也是我们今天的主角。二、maven依赖...
    Alian_1223
    嘉禾嘉宁papa
    昨天
    阅读数 363
    评论

  • 2021年秋招总结

    选择理由，精准屏蔽

    学历：211本+985硕实习：无项目：一个简易的MVC应用网站论文：SCI二区四作（划水），EI会议一作，SCI在投一作目标：国企，其中包括银行，运营商，中石油，中石化等，还有研究所可做考虑，国网因为时间较晚，作最后备选。地点：北京或天津，更偏向于天津。按照收到回复的时间先后顺序作整理1. 中国农业银行所投岗位：研发中心，总行2个岗位，天津分行1个我的网申时间：2021/08/23，笔试时间：2021/09/06（应该是提前批或第一批）农行是所有银行里面开始招收最早的，抢人很激烈，如果打
    qq_41937076
    往往
    昨天
    阅读数 299
    评论

  • Linux安装Erlang、RabbtiMQ，添加新的用户、RabbitMQ常用命令等

    选择理由，精准屏蔽

    安装或者使用所有组件都是从官网入手RabbitMQ官网点击Get Started进入开始页面进行下载准备下载对应的版本（我这里是CentOS）安装Erlang环境RabbitMQ是Erlang语言编写的，所以在安装RabbitMQ之前， 安装之前先查看官网RabbitMQ与Erlang的版本对应关系。使用PackageCloud提供的脚本安装Erlang进入PackageCloud官网找到需要的Erlang版本# 1:执行脚本依赖curl -s https://pack
    weixin_45528650
    银魄清辉自夜凝
    前天
    阅读数 245
    评论

  • maven版本和jdk版本不一致导致的项目冲突！！（坑死）

    选择理由，精准屏蔽

    问题描述：最近在弄一个Hadoop项目，在IDEA上操作HDFS上传下载文件，我的maven版本是3.6.3，然后Hadoop版本是2.6.0运行报错如下：Exception in thread “main” java.io.IOException: No FileSystem for scheme: hdfs解决方案：我是通过更换maven版本来解决的这个问题，又下了一个3.6.1的版本。因为Hadoop2.6.0的版本使用的jdktools包是1.6，maven不支持，所以会导致错误。注意记得
    weixin_44911081
    万家林
    昨天
    阅读数 170
    评论

  • Elasticsearch 中为什么选择倒排索引而不选择 B 树索引

    选择理由，精准屏蔽

    Elasticsearch 中为什么选择倒排索引而选择 B 树索引前言为什么全文索引不使用 B+ 树进行存储全文检索正排索引倒排索引倒排索引如何存储数据FOR 压缩RBM 压缩倒排索引如何存储字典树（Tria Tree）FSTFSM构建 FST总结前言索引可能大家都不陌生，在用关系型数据库时，一些频繁用作查询条件的字段我们都会去建立索引来提升查询效率。在关系型数据库中，我们一般都采用 B 树索引进行存储，所以 B 树索引也是我们接触比较多的一种索引数据结构，然而在 es 中，进行全文搜索的时候却并没有选
    zwx900102
    双子孤狼
    昨天
    阅读数 214
    评论

  • MapReduce过程详解（非常全）

    选择理由，精准屏蔽

    MapReduce算法执行过程（1）MapReduce框架使用InputFormat模块做Map前的预处理，比如验证输入的格式是否符合输入定义；然后，将输入的文件切分为逻辑上的多个InputSplit，InputSplit是MapReduce对文件进行处理和运算的实际单位（逻辑概念），每个InputSplit没有对文件进行实际切割，只是记录了要处理的数据的位置和长度。（2）InputSplit是逻辑切分，所以需要通过RecordReader(RR)根据InputSplit的信息来处理InputSplit
    qq_45725767
    Love in BigData-渐进者
    昨天
    阅读数 188
    评论

  • docker部署Hadoop、HBase环境（Centos7系统）

    选择理由，精准屏蔽

    一、安装docker1.下载离线包Index of linux/static/stable/x86_64/2.
    u010588886
    u010588886
    昨天
    阅读数 178
    评论

  • 【推荐】如何将枯燥的大数据呈现为可视化的图和动画？

    选择理由，精准屏蔽

    随着我国数字化建设的逐渐深入，越来越多的企业认识到数据价值的重要性，纷纷用上了工作视觉化展示利器——可视化大屏。然而做一个可视化大屏，免不了要用到Echarts / HighCharts / D3这些框架，如果追求3D效果，还要加上WebGL与协调设计的时间，对于研发而言确实劳心又费力。那么，有没有一款低代码，还是免费开源的工具可以帮助用户快速做个大屏呢？推荐一款可视化工具—FlyFish。飞鱼平台(FlyFish)是云智慧公司自主设计、研发的一款低门槛、高拓展性的低代码应用开发平台，为大屏开发
    Sharon0408
    云智慧技术社区
    昨天
    阅读数 154
    评论

  • 2021-10-26

    选择理由，精准屏蔽

    HDFS写数据流程图
    m0_62617758
    m0_62617758
    22小时前
    阅读数 117
    评论

  • 2021-10-25

    选择理由，精准屏蔽

    优化选择排序选择排序的思想：第一次外层循环中找出数组中的最小值，放到数组最前端，接下来要遍历的长度就是[1,arr.length-1],(本身可遍历的是[0,arr.length-1])，第二次下来就是[2,arr.length-1]…优化思想：在一次外层外层循环中找出最小值和最大值，将最小值放到数组开头，将最大值放到数组末尾，这样一次循环之后数组可遍历的长度是[1,arr.length-2],效率比起原来提升了一倍，当最大值和最小值都走到中心的时候，可以进行判断是已经排好序，然后直接结束循环，这样又可
    qq_45134562
    不夸张怕你不相信
    前天
    阅读数 129
    评论

  • 学习笔记Kafka（五）—— Kafka 开发环境配置及Producer API

    选择理由，精准屏蔽

    一、开发环境说明1、创建Maven工程1.1、开发环境Maven && JDK 1.2、Pom配置Compiler Configuration 在pom.xml添加：<properties> <maven.compiler.target>1.8</maven.compiler.target> <maven.compiler.source>1.8</maven.compiler.so
    qq_46485161
    别呀
    22小时前
    阅读数 161
    评论

  • HDFS写数据流程

    选择理由，精准屏蔽

    在了解HDFS写数据流程之前，我们先来了解HDFS是什么，干什么用的。 HDFS可以实现大数据的存储，并处理巨大的文件。而HDFS处理巨大文件的思路是将巨大的文件割成小块文件进行存储，称为”数据块分布式处理“。 接下来让我们看一下HDFS的写数据流程！其中Namenode（nn）是名称节点用来管理文件系统的命名空间。Datenode(dn)数据节点是分布式文件系统HDFS的工作节点，负责数据的存储和读取。1.客户端向Namenode发出写数据请求。2.nn检查目...
    Guo142326
    Guo142326
    22小时前
    阅读数 167
    评论

  • 03-Eureka学习

    选择理由，精准屏蔽

    Eureka服务注册与发现Eureka包含两个组件:Eureka Server和Eureka client .Eureka Server提供服务注册服务，各个节点启动后，会在EurekaServer中进行注册，这样Eureka Server中的服务注册表中将会村粗所有可用服务节点的信息，服务节点的信息可以在界面中直观的看到。EurekaClient是一个Java客户端，用于简化EurekaServer的交互，客户端同时也具备一个内置的，使用轮询负载算法的负载均衡器。在应用启动后，将会向EurekaSe
    xixihaha_coder
    java全栈_coder
    昨天
    阅读数 161
    评论

  • BI与报表的区别

    选择理由，精准屏蔽

    接触BI时间不是很长，但是对于报表的认识可以说是从入行起就经常听说。像我们对于表表的认识，大多数就是类似于Excel表格一样，做出的各种列表式数据展示。做的更好一点的如在页面中增加一些图表，增加报表的可读性。近几年，对于商业智能，数据可视化，数据钻取，报表套打，BI，大数据分析，数据决策，数据辅助等等各种数据分析行业的名词可以说是迎面扑来，但是对于很多没了解过的人来说，这些词既熟悉又陌生。在这里就简单给大家概述一下，对于现在数据分析行业中的两大革命性产物，商业智能BI，商业智能报表做一个简单又详细的
    qq_20104119
    滴酒_醉红颜
    20小时前
    阅读数 153
    评论

  • 知识图谱|学习笔记|《知识图谱概念与技术》肖仰华——第1章 知识图谱概述

    选择理由，精准屏蔽

    知识图谱概述文章目录知识图谱概述1.1 知识图谱的基本概念1.1.1 知识图谱的狭义概念1.1.2 知识图谱的广义概念1.2 知识图谱的历史沿革1.2.1 知识图谱溯源1.2.2 大数据知识工程1.3 知识图谱的研究意义1.3.1 知识图谱的认知智能的基石1.3.2 知识引导成为解决问题的重要方式之一1.4 知识图谱的应用价值1.4.1 数据分析1.4.2 智慧搜索1.4.3 智能推荐1.4.4 自然人机交互1.4.5 决策支持1.5 知识图谱的分类1.5.1 知识图谱中的知识分类1.5.2 知识图谱的领
    HZCsummer
    YOLO_OnePiece
    昨天
    阅读数 128
    评论
加载中...

  • 华为云战略投入政企市场，发布华为云Stack

    华为云 政企云
    2020-05-15 0

  • 抗疫进展：多家科研机构联合筛选出五种可能有效的抗病毒药物

    2月3日，华中科技大学同济医学院基础医学院、华中科技大学同济医学院附属武汉儿童医院、西安交通大学第一附属医院、中科院北京基因组研究所、华为云联合科研团队宣布，筛选出五种可能对2019新型冠状病毒（2019-nCoV）有效的抗病毒药物。

    2020-02-03 0

  • 无论是狗粮还是降落伞，反正WeLink来了……

    作为一家年营收超1000亿美元全球化企业，华为有19万员工且多达1023个办公地点，遍布世界范围内170多个国家并横跨运营商、政企和消费者三大领域的业务规模……如此雄厚财力、庞大架构、繁杂业务，有何可愁？自然是对寻找一款能够支撑企业有效增长以及全球化运作的智能工作平台有高度迫切的需求，这就是华为云WeLink的缘起之因。“确实，WeLink在华为云产品序列中绝对算得上是战略级，我们对此投入了很多。”华为云副总裁、联接与协同业务总裁薛浩说。

    华为云 云计算 WeLink
    2019-12-31 0

  • 开放共赢，华为云WeLink生态联盟正式成立

    今日，华为在北京发布更懂企业的智能工作平台华为云WeLink，并携手合作伙伴成立华为云WeLink生态联盟。 首批加入华为云WeLink生态联盟的伙伴包括（排名不分先后）：金山办公、中软国际、致远互联、罗技、华为商旅、红圈营销、合思费控、Coremail论客、芯盾集团、目睹直播、视源股份、喜马拉雅、为知笔记等。

    华为云 云计算
    2019-12-26 0

  • 华为云WeLink正式发布，更懂企业的智能工作平台

    今日，华为云在北京发布智能工作平台WeLink。华为云副总裁、联接与协同业务总裁薛浩表示：“华为云WeLink源自华为数字化转型实践，是更懂企业的智能工作平台，具备智能高效、安全可靠、开放共赢三大核心优势，为政企开启数字化办公智能新体验，助力实现数字化转型。”

    华为云 云计算
    2019-12-26 0

  • 开放华为30年研发能力与实践 助力DevOps真正落地

    高速的中子撞击U235原子核，使其分裂成两个原子核，释放出巨大能量，同时产生的几个中子再去撞击其它原子核，形成链式反应，使得核裂变会无限的产生巨大的能量。“将高速的中子比喻成人类的创新思想，原子核就是我们目前的业务，当创新思想碰撞当前业务，就会衍生出新的业务，又激发出更多的创新思路，形成业务的链式创新。”华为云应用平台领域副总裁汪维敏一语道破， 云+AI+5G时代，新技术不断深度融合所产生巨大能量背后的力量。如今，欲快速迈进万物互联世界，数字化转型成为企业发展的必由之路，这亦是我们应对技术需求与商业环境变化的有效措施。

    DevOps
    2019-12-17 0

  • 华为云DevCloud让软件开发更加高效智能， DevOps不止于美

    DevOps DevCloud 华为云
    2019-12-11 0

  • 华为云TaurusDB计算存储分离架构：让数据“身”分离，“心”凝聚

    在2019年HC大会上，华为重磅推出最新一代高扩展海量存储分布式数据库——TaurusDB，它拥有一个最大的特点就是将存储和计算以一种分离的架构形式运行。很多人就会问到，华为云为什么会设计这款产品？核心竞争力是什么？对比原生MySQL的优势有哪些？借此时机，CSDN记者有幸采访到了华为云TaurusDB数据库资深技术专家，现在就请他来为我们一一解答。

    2019-11-30 0

活动

独家定制

饮水思源、万象更新-数据库开源（杭州站）沙龙活动

立即报名

腾讯安全专区

3500人的专业安全团队与你同在

C课有道

CSDN云计算在线公开课

云中不可忽视的IaaS创新

IaaS市场高速增长，历久弥新

精品推荐

关于我们

关注「云计算」​

转载 & 投稿：songhui@csdn.net

商务合作：zhangjing@csdn.net