• 相关博文
  • 最新资讯

  • Hadoop集群搭建(步骤图文超详细版)

    选择理由，精准屏蔽

    一、前置条件需要安装下载方法Vmware Workstation官网下载链接Centos7系统百度网盘下载 ， 提取码：t6vajdk1.8官网下载链接MobaXterm百度网盘下载，提取码：f64vhadoop官网下载链接(最新)二、安装Centos系统三、配置Centos系统静态IP（很重要！）这里我之前的文章写过，这里就不详细讲了，有需要的可以看看我这篇文章：配置教程注意：不配置的话Centos系统无法连网
    huisoul
    HuiSoul
    昨天
    阅读数 440
    评论

  • 5万成员丨CSDN 大数据领域网红社区！

    选择理由，精准屏蔽

    一、社区愿景我的梦想很大，大到致力于打造大数据领域第一社区，赋能中国技术社区蓬勃发展。我的“格局”很小，小到每一篇优质文章，都会不吝啬加精，置顶。
    weixin_39032019
    不吃西红柿丶
    昨天
    阅读数 1291
    评论

  • Overloaded method foreachBatch with alternatives

    选择理由，精准屏蔽

    前言本文隶属于专栏《Spark异常问题汇总》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！本专栏目录结构和参考文献请见 Spark异常问题汇总正文问题描述Spark 编译报错：Error:(34, 25) overloaded method foreachBatch with alternatives: (function: org.apache.spark.api.java.function.VoidFunction2[org.apache.spark.sq
    Shockang
    Shockang
    昨天
    阅读数 183
    评论

  • Elasticsearch(一) 安装和配置启动

    选择理由，精准屏蔽

    前言: 本环境在阿里轻量级服务器(Ubuntu)上 执行(一) 环境搭建1.1 java环境环境：ES 为 java 语言编写， 需要有 java 环境版本说明：ES 5 需要 Java 8 及以上的版本ES 7 开始内置了 Java 环境apt updateapt install default-jre // 下载jdk环境验证输入: java --version 返回以下代码算成功1.2 Elasticsearch下载通过官方下载地址挑选你喜欢的下载包下载地址: h
    weixin_44544813
    king丶绝世佳友
    前天
    阅读数 397
    评论

  • 数据采集与清洗基础习题（四）Pandas初体验，头歌参考答案

    选择理由，精准屏蔽

    数据采集习题参考答案，会持续更新，点个关注防丢失。创作不易，一键三连给博主一个支持呗。为了方便查找，已按照头歌重新排版，朋友们按照头歌所属门类查找实训哦，该篇为Pandas。文章目录实训一：Pandas初体验第一关：了解数据处理对象--Series编程要求Pandas中的数据结构第一关答案第二关：了解数据处理对象-DataFrame编程要求相关知识第二关答案第三关：读取CSV格式数据编程要求相关知识第三关答案第四关：数据的基本操作——排序
    qq_48774513
    饲养猿
    昨天
    阅读数 430
    评论

  • SpringBoot基于Zookeeper和Curator生成唯一ID

    选择理由，精准屏蔽

    目录一、简介二、maven依赖一、简介  在分布式系统中，为了保证同一时间只能由一个客户端对共享资源操作，我们通常采用加锁来实现，常见有三种方式：基于数据库实现的分布式锁基于zookeeper实现的分布式锁基于redis实现的分布式锁  而在使用redis实现时Redisson是官方推荐的一种方案也是我们今天的主角。二、maven依赖...
    Alian_1223
    嘉禾嘉宁papa
    昨天
    阅读数 373
    评论

  • 2021年秋招总结

    选择理由，精准屏蔽

    学历：211本+985硕实习：无项目：一个简易的MVC应用网站论文：SCI二区四作（划水），EI会议一作，SCI在投一作目标：国企，其中包括银行，运营商，中石油，中石化等，还有研究所可做考虑，国网因为时间较晚，作最后备选。地点：北京或天津，更偏向于天津。按照收到回复的时间先后顺序作整理1. 中国农业银行所投岗位：研发中心，总行2个岗位，天津分行1个我的网申时间：2021/08/23，笔试时间：2021/09/06（应该是提前批或第一批）农行是所有银行里面开始招收最早的，抢人很激烈，如果打
    qq_41937076
    往往
    昨天
    阅读数 305
    评论

  • Linux安装Erlang、RabbtiMQ，添加新的用户、RabbitMQ常用命令等

    选择理由，精准屏蔽

    安装或者使用所有组件都是从官网入手RabbitMQ官网点击Get Started进入开始页面进行下载准备下载对应的版本（我这里是CentOS）安装Erlang环境RabbitMQ是Erlang语言编写的，所以在安装RabbitMQ之前， 安装之前先查看官网RabbitMQ与Erlang的版本对应关系。使用PackageCloud提供的脚本安装Erlang进入PackageCloud官网找到需要的Erlang版本# 1:执行脚本依赖curl -s https://pack
    weixin_45528650
    银魄清辉自夜凝
    前天
    阅读数 251
    评论

  • maven版本和jdk版本不一致导致的项目冲突！！（坑死）

    选择理由，精准屏蔽

    问题描述：最近在弄一个Hadoop项目，在IDEA上操作HDFS上传下载文件，我的maven版本是3.6.3，然后Hadoop版本是2.6.0运行报错如下：Exception in thread “main” java.io.IOException: No FileSystem for scheme: hdfs解决方案：我是通过更换maven版本来解决的这个问题，又下了一个3.6.1的版本。因为Hadoop2.6.0的版本使用的jdktools包是1.6，maven不支持，所以会导致错误。注意记得
    weixin_44911081
    万家林
    昨天
    阅读数 172
    评论

  • Elasticsearch 中为什么选择倒排索引而不选择 B 树索引

    选择理由，精准屏蔽

    Elasticsearch 中为什么选择倒排索引而选择 B 树索引前言为什么全文索引不使用 B+ 树进行存储全文检索正排索引倒排索引倒排索引如何存储数据FOR 压缩RBM 压缩倒排索引如何存储字典树（Tria Tree）FSTFSM构建 FST总结前言索引可能大家都不陌生，在用关系型数据库时，一些频繁用作查询条件的字段我们都会去建立索引来提升查询效率。在关系型数据库中，我们一般都采用 B 树索引进行存储，所以 B 树索引也是我们接触比较多的一种索引数据结构，然而在 es 中，进行全文搜索的时候却并没有选
    zwx900102
    双子孤狼
    昨天
    阅读数 219
    评论

  • MapReduce过程详解（非常全）

    选择理由，精准屏蔽

    MapReduce算法执行过程（1）MapReduce框架使用InputFormat模块做Map前的预处理，比如验证输入的格式是否符合输入定义；然后，将输入的文件切分为逻辑上的多个InputSplit，InputSplit是MapReduce对文件进行处理和运算的实际单位（逻辑概念），每个InputSplit没有对文件进行实际切割，只是记录了要处理的数据的位置和长度。（2）InputSplit是逻辑切分，所以需要通过RecordReader(RR)根据InputSplit的信息来处理InputSplit
    qq_45725767
    Love in BigData-渐进者
    昨天
    阅读数 192
    评论

  • docker部署Hadoop、HBase环境（Centos7系统）

    选择理由，精准屏蔽

    一、安装docker1.下载离线包Index of linux/static/stable/x86_64/2.
    u010588886
    u010588886
    昨天
    阅读数 181
    评论

  • 【推荐】如何将枯燥的大数据呈现为可视化的图和动画？

    选择理由，精准屏蔽

    随着我国数字化建设的逐渐深入，越来越多的企业认识到数据价值的重要性，纷纷用上了工作视觉化展示利器——可视化大屏。然而做一个可视化大屏，免不了要用到Echarts / HighCharts / D3这些框架，如果追求3D效果，还要加上WebGL与协调设计的时间，对于研发而言确实劳心又费力。那么，有没有一款低代码，还是免费开源的工具可以帮助用户快速做个大屏呢？推荐一款可视化工具—FlyFish。飞鱼平台(FlyFish)是云智慧公司自主设计、研发的一款低门槛、高拓展性的低代码应用开发平台，为大屏开发
    Sharon0408
    云智慧技术社区
    昨天
    阅读数 156
    评论

  • 2021-10-26

    选择理由，精准屏蔽

    HDFS写数据流程图
    m0_62617758
    m0_62617758
    23小时前
    阅读数 120
    评论

  • 2021-10-25

    选择理由，精准屏蔽

    优化选择排序选择排序的思想：第一次外层循环中找出数组中的最小值，放到数组最前端，接下来要遍历的长度就是[1,arr.length-1],(本身可遍历的是[0,arr.length-1])，第二次下来就是[2,arr.length-1]…优化思想：在一次外层外层循环中找出最小值和最大值，将最小值放到数组开头，将最大值放到数组末尾，这样一次循环之后数组可遍历的长度是[1,arr.length-2],效率比起原来提升了一倍，当最大值和最小值都走到中心的时候，可以进行判断是已经排好序，然后直接结束循环，这样又可
    qq_45134562
    不夸张怕你不相信
    前天
    阅读数 132
    评论

  • 学习笔记Kafka（五）—— Kafka 开发环境配置及Producer API

    选择理由，精准屏蔽

    一、开发环境说明1、创建Maven工程1.1、开发环境Maven && JDK 1.2、Pom配置Compiler Configuration 在pom.xml添加：<properties> <maven.compiler.target>1.8</maven.compiler.target> <maven.compiler.source>1.8</maven.compiler.so
    qq_46485161
    别呀
    23小时前
    阅读数 165
    评论

  • HDFS写数据流程

    选择理由，精准屏蔽

    在了解HDFS写数据流程之前，我们先来了解HDFS是什么，干什么用的。 HDFS可以实现大数据的存储，并处理巨大的文件。而HDFS处理巨大文件的思路是将巨大的文件割成小块文件进行存储，称为”数据块分布式处理“。 接下来让我们看一下HDFS的写数据流程！其中Namenode（nn）是名称节点用来管理文件系统的命名空间。Datenode(dn)数据节点是分布式文件系统HDFS的工作节点，负责数据的存储和读取。1.客户端向Namenode发出写数据请求。2.nn检查目...
    Guo142326
    Guo142326
    23小时前
    阅读数 170
    评论

  • 03-Eureka学习

    选择理由，精准屏蔽

    Eureka服务注册与发现Eureka包含两个组件:Eureka Server和Eureka client .Eureka Server提供服务注册服务，各个节点启动后，会在EurekaServer中进行注册，这样Eureka Server中的服务注册表中将会村粗所有可用服务节点的信息，服务节点的信息可以在界面中直观的看到。EurekaClient是一个Java客户端，用于简化EurekaServer的交互，客户端同时也具备一个内置的，使用轮询负载算法的负载均衡器。在应用启动后，将会向EurekaSe
    xixihaha_coder
    java全栈_coder
    昨天
    阅读数 164
    评论

  • BI与报表的区别

    选择理由，精准屏蔽

    接触BI时间不是很长，但是对于报表的认识可以说是从入行起就经常听说。像我们对于表表的认识，大多数就是类似于Excel表格一样，做出的各种列表式数据展示。做的更好一点的如在页面中增加一些图表，增加报表的可读性。近几年，对于商业智能，数据可视化，数据钻取，报表套打，BI，大数据分析，数据决策，数据辅助等等各种数据分析行业的名词可以说是迎面扑来，但是对于很多没了解过的人来说，这些词既熟悉又陌生。在这里就简单给大家概述一下，对于现在数据分析行业中的两大革命性产物，商业智能BI，商业智能报表做一个简单又详细的
    qq_20104119
    滴酒_醉红颜
    21小时前
    阅读数 155
    评论

  • 知识图谱|学习笔记|《知识图谱概念与技术》肖仰华——第1章 知识图谱概述

    选择理由，精准屏蔽

    知识图谱概述文章目录知识图谱概述1.1 知识图谱的基本概念1.1.1 知识图谱的狭义概念1.1.2 知识图谱的广义概念1.2 知识图谱的历史沿革1.2.1 知识图谱溯源1.2.2 大数据知识工程1.3 知识图谱的研究意义1.3.1 知识图谱的认知智能的基石1.3.2 知识引导成为解决问题的重要方式之一1.4 知识图谱的应用价值1.4.1 数据分析1.4.2 智慧搜索1.4.3 智能推荐1.4.4 自然人机交互1.4.5 决策支持1.5 知识图谱的分类1.5.1 知识图谱中的知识分类1.5.2 知识图谱的领
    HZCsummer
    YOLO_OnePiece
    昨天
    阅读数 131
    评论
加载中...

活动

独家定制

饮水思源、万象更新-数据库开源（杭州站）沙龙活动

立即报名

腾讯安全专区

3500人的专业安全团队与你同在

C课有道

CSDN云计算在线公开课

云中不可忽视的IaaS创新

IaaS市场高速增长，历久弥新

精品推荐

关于我们

关注「云计算」​

转载 & 投稿：songhui@csdn.net

商务合作：zhangjing@csdn.net