• 相关博文
  • 最新资讯

  • Hadoop集群搭建(步骤图文超详细版)

    选择理由，精准屏蔽

    一、前置条件需要安装下载方法Vmware Workstation官网下载链接Centos7系统百度网盘下载 ， 提取码：t6vajdk1.8官网下载链接MobaXterm百度网盘下载，提取码：f64vhadoop官网下载链接(最新)二、安装Centos系统三、配置Centos系统静态IP（很重要！）这里我之前的文章写过，这里就不详细讲了，有需要的可以看看我这篇文章：配置教程注意：不配置的话Centos系统无法连网
    huisoul
    HuiSoul
    昨天
    阅读数 457
    评论

  • 5万成员丨CSDN 大数据领域网红社区！

    选择理由，精准屏蔽

    一、社区愿景我的梦想很大，大到致力于打造大数据领域第一社区，赋能中国技术社区蓬勃发展。我的“格局”很小，小到每一篇优质文章，都会不吝啬加精，置顶。
    weixin_39032019
    不吃西红柿丶
    昨天
    阅读数 1373
    评论

  • Overloaded method foreachBatch with alternatives

    选择理由，精准屏蔽

    前言本文隶属于专栏《Spark异常问题汇总》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！本专栏目录结构和参考文献请见 Spark异常问题汇总正文问题描述Spark 编译报错：Error:(34, 25) overloaded method foreachBatch with alternatives: (function: org.apache.spark.api.java.function.VoidFunction2[org.apache.spark.sq
    Shockang
    Shockang
    昨天
    阅读数 193
    评论

  • Elasticsearch(一) 安装和配置启动

    选择理由，精准屏蔽

    前言: 本环境在阿里轻量级服务器(Ubuntu)上 执行(一) 环境搭建1.1 java环境环境：ES 为 java 语言编写， 需要有 java 环境版本说明：ES 5 需要 Java 8 及以上的版本ES 7 开始内置了 Java 环境apt updateapt install default-jre // 下载jdk环境验证输入: java --version 返回以下代码算成功1.2 Elasticsearch下载通过官方下载地址挑选你喜欢的下载包下载地址: h
    weixin_44544813
    king丶绝世佳友
    前天
    阅读数 410
    评论

  • 数据采集与清洗基础习题（四）Pandas初体验，头歌参考答案

    选择理由，精准屏蔽

    数据采集习题参考答案，会持续更新，点个关注防丢失。创作不易，一键三连给博主一个支持呗。为了方便查找，已按照头歌重新排版，朋友们按照头歌所属门类查找实训哦，该篇为Pandas。文章目录实训一：Pandas初体验第一关：了解数据处理对象--Series编程要求Pandas中的数据结构第一关答案第二关：了解数据处理对象-DataFrame编程要求相关知识第二关答案第三关：读取CSV格式数据编程要求相关知识第三关答案第四关：数据的基本操作——排序
    qq_48774513
    饲养猿
    昨天
    阅读数 457
    评论

  • SpringBoot基于Zookeeper和Curator生成唯一ID

    选择理由，精准屏蔽

    目录一、简介二、maven依赖一、简介  在分布式系统中，为了保证同一时间只能由一个客户端对共享资源操作，我们通常采用加锁来实现，常见有三种方式：基于数据库实现的分布式锁基于zookeeper实现的分布式锁基于redis实现的分布式锁  而在使用redis实现时Redisson是官方推荐的一种方案也是我们今天的主角。二、maven依赖...
    Alian_1223
    嘉禾嘉宁papa
    昨天
    阅读数 398
    评论

  • 2021年秋招总结

    选择理由，精准屏蔽

    学历：211本+985硕实习：无项目：一个简易的MVC应用网站论文：SCI二区四作（划水），EI会议一作，SCI在投一作目标：国企，其中包括银行，运营商，中石油，中石化等，还有研究所可做考虑，国网因为时间较晚，作最后备选。地点：北京或天津，更偏向于天津。按照收到回复的时间先后顺序作整理1. 中国农业银行所投岗位：研发中心，总行2个岗位，天津分行1个我的网申时间：2021/08/23，笔试时间：2021/09/06（应该是提前批或第一批）农行是所有银行里面开始招收最早的，抢人很激烈，如果打
    qq_41937076
    往往
    前天
    阅读数 313
    评论

  • Linux安装Erlang、RabbtiMQ，添加新的用户、RabbitMQ常用命令等

    选择理由，精准屏蔽

    安装或者使用所有组件都是从官网入手RabbitMQ官网点击Get Started进入开始页面进行下载准备下载对应的版本（我这里是CentOS）安装Erlang环境RabbitMQ是Erlang语言编写的，所以在安装RabbitMQ之前， 安装之前先查看官网RabbitMQ与Erlang的版本对应关系。使用PackageCloud提供的脚本安装Erlang进入PackageCloud官网找到需要的Erlang版本# 1:执行脚本依赖curl -s https://pack
    weixin_45528650
    银魄清辉自夜凝
    前天
    阅读数 264
    评论

  • maven版本和jdk版本不一致导致的项目冲突！！（坑死）

    选择理由，精准屏蔽

    问题描述：最近在弄一个Hadoop项目，在IDEA上操作HDFS上传下载文件，我的maven版本是3.6.3，然后Hadoop版本是2.6.0运行报错如下：Exception in thread “main” java.io.IOException: No FileSystem for scheme: hdfs解决方案：我是通过更换maven版本来解决的这个问题，又下了一个3.6.1的版本。因为Hadoop2.6.0的版本使用的jdktools包是1.6，maven不支持，所以会导致错误。注意记得
    weixin_44911081
    万家林
    昨天
    阅读数 181
    评论

  • Elasticsearch 中为什么选择倒排索引而不选择 B 树索引

    选择理由，精准屏蔽

    Elasticsearch 中为什么选择倒排索引而选择 B 树索引前言为什么全文索引不使用 B+ 树进行存储全文检索正排索引倒排索引倒排索引如何存储数据FOR 压缩RBM 压缩倒排索引如何存储字典树（Tria Tree）FSTFSM构建 FST总结前言索引可能大家都不陌生，在用关系型数据库时，一些频繁用作查询条件的字段我们都会去建立索引来提升查询效率。在关系型数据库中，我们一般都采用 B 树索引进行存储，所以 B 树索引也是我们接触比较多的一种索引数据结构，然而在 es 中，进行全文搜索的时候却并没有选
    zwx900102
    双子孤狼
    昨天
    阅读数 233
    评论

  • MapReduce过程详解（非常全）

    选择理由，精准屏蔽

    MapReduce算法执行过程（1）MapReduce框架使用InputFormat模块做Map前的预处理，比如验证输入的格式是否符合输入定义；然后，将输入的文件切分为逻辑上的多个InputSplit，InputSplit是MapReduce对文件进行处理和运算的实际单位（逻辑概念），每个InputSplit没有对文件进行实际切割，只是记录了要处理的数据的位置和长度。（2）InputSplit是逻辑切分，所以需要通过RecordReader(RR)根据InputSplit的信息来处理InputSplit
    qq_45725767
    Love in BigData-渐进者
    昨天
    阅读数 197
    评论

  • docker部署Hadoop、HBase环境（Centos7系统）

    选择理由，精准屏蔽

    一、安装docker1.下载离线包Index of linux/static/stable/x86_64/2.
    u010588886
    u010588886
    昨天
    阅读数 188
    评论

  • 【推荐】如何将枯燥的大数据呈现为可视化的图和动画？

    选择理由，精准屏蔽

    随着我国数字化建设的逐渐深入，越来越多的企业认识到数据价值的重要性，纷纷用上了工作视觉化展示利器——可视化大屏。然而做一个可视化大屏，免不了要用到Echarts / HighCharts / D3这些框架，如果追求3D效果，还要加上WebGL与协调设计的时间，对于研发而言确实劳心又费力。那么，有没有一款低代码，还是免费开源的工具可以帮助用户快速做个大屏呢？推荐一款可视化工具—FlyFish。飞鱼平台(FlyFish)是云智慧公司自主设计、研发的一款低门槛、高拓展性的低代码应用开发平台，为大屏开发
    Sharon0408
    云智慧技术社区
    昨天
    阅读数 162
    评论

  • 2021-10-26

    选择理由，精准屏蔽

    HDFS写数据流程图
    m0_62617758
    m0_62617758
    昨天
    阅读数 122
    评论

  • 2021-10-25

    选择理由，精准屏蔽

    优化选择排序选择排序的思想：第一次外层循环中找出数组中的最小值，放到数组最前端，接下来要遍历的长度就是[1,arr.length-1],(本身可遍历的是[0,arr.length-1])，第二次下来就是[2,arr.length-1]…优化思想：在一次外层外层循环中找出最小值和最大值，将最小值放到数组开头，将最大值放到数组末尾，这样一次循环之后数组可遍历的长度是[1,arr.length-2],效率比起原来提升了一倍，当最大值和最小值都走到中心的时候，可以进行判断是已经排好序，然后直接结束循环，这样又可
    qq_45134562
    不夸张怕你不相信
    前天
    阅读数 136
    评论

  • 学习笔记Kafka（五）—— Kafka 开发环境配置及Producer API

    选择理由，精准屏蔽

    一、开发环境说明1、创建Maven工程1.1、开发环境Maven && JDK 1.2、Pom配置Compiler Configuration 在pom.xml添加：<properties> <maven.compiler.target>1.8</maven.compiler.target> <maven.compiler.source>1.8</maven.compiler.so
    qq_46485161
    别呀
    昨天
    阅读数 172
    评论

  • HDFS写数据流程

    选择理由，精准屏蔽

    在了解HDFS写数据流程之前，我们先来了解HDFS是什么，干什么用的。 HDFS可以实现大数据的存储，并处理巨大的文件。而HDFS处理巨大文件的思路是将巨大的文件割成小块文件进行存储，称为”数据块分布式处理“。 接下来让我们看一下HDFS的写数据流程！其中Namenode（nn）是名称节点用来管理文件系统的命名空间。Datenode(dn)数据节点是分布式文件系统HDFS的工作节点，负责数据的存储和读取。1.客户端向Namenode发出写数据请求。2.nn检查目...
    Guo142326
    Guo142326
    昨天
    阅读数 175
    评论

  • 03-Eureka学习

    选择理由，精准屏蔽

    Eureka服务注册与发现Eureka包含两个组件:Eureka Server和Eureka client .Eureka Server提供服务注册服务，各个节点启动后，会在EurekaServer中进行注册，这样Eureka Server中的服务注册表中将会村粗所有可用服务节点的信息，服务节点的信息可以在界面中直观的看到。EurekaClient是一个Java客户端，用于简化EurekaServer的交互，客户端同时也具备一个内置的，使用轮询负载算法的负载均衡器。在应用启动后，将会向EurekaSe
    xixihaha_coder
    java全栈_coder
    昨天
    阅读数 169
    评论

  • BI与报表的区别

    选择理由，精准屏蔽

    接触BI时间不是很长，但是对于报表的认识可以说是从入行起就经常听说。像我们对于表表的认识，大多数就是类似于Excel表格一样，做出的各种列表式数据展示。做的更好一点的如在页面中增加一些图表，增加报表的可读性。近几年，对于商业智能，数据可视化，数据钻取，报表套打，BI，大数据分析，数据决策，数据辅助等等各种数据分析行业的名词可以说是迎面扑来，但是对于很多没了解过的人来说，这些词既熟悉又陌生。在这里就简单给大家概述一下，对于现在数据分析行业中的两大革命性产物，商业智能BI，商业智能报表做一个简单又详细的
    qq_20104119
    滴酒_醉红颜
    22小时前
    阅读数 161
    评论

  • 知识图谱|学习笔记|《知识图谱概念与技术》肖仰华——第1章 知识图谱概述

    选择理由，精准屏蔽

    知识图谱概述文章目录知识图谱概述1.1 知识图谱的基本概念1.1.1 知识图谱的狭义概念1.1.2 知识图谱的广义概念1.2 知识图谱的历史沿革1.2.1 知识图谱溯源1.2.2 大数据知识工程1.3 知识图谱的研究意义1.3.1 知识图谱的认知智能的基石1.3.2 知识引导成为解决问题的重要方式之一1.4 知识图谱的应用价值1.4.1 数据分析1.4.2 智慧搜索1.4.3 智能推荐1.4.4 自然人机交互1.4.5 决策支持1.5 知识图谱的分类1.5.1 知识图谱中的知识分类1.5.2 知识图谱的领
    HZCsummer
    YOLO_OnePiece
    昨天
    阅读数 135
    评论
加载中...

  • OpenStack发布Ussuri版本 实现智能开源基础设施的自动化

    OpenStack 开源 基础设施
    2020-05-16 0

  • Bespin Global荣膺“Gartner2020全球公有云基础设施管理服务提供商魔力象限领导者”

    2020-05-07 0

  • 大麦云原生边缘计算探索，让观众剧院看戏也能实现个性化

    近年来，我国文化产业蓬勃发展，文化产业价值年均增速远高于同期 GDP 增速，尽管中 国演出市场在开放竞争中逐步规范有序，但目前仍处于起步和培育阶段，尚不够完善和成熟。尤其在演出场馆基础设施、管理运营等方面参差不齐。

    云计算 云原生 边缘计算
    2020-04-03 0

  • 云+X案例展 | 金融类：荣之联助力君康人寿构建新一代数据中心

    近年来，互联网、大数据、云计算和物联网等行业的蓬勃发展，对数据的存储、交换、计算等的应用需求不断增加，使得大数据发展需求下对上游基础设施领域的需求持续旺盛，促进了数据中心（简称“IDC”）需求的不断增加。同时，各国5G技术的发展和商用化的推广又进一步促进了IDC行业爆发增长。未来，IDC行业必将成为物联网、云计算及5G技术的不断完善与发展下又一风口。

    云+X案例
    2019-12-19 0

  • 云+X案例展 | 民生类：浪潮云打卡人间仙境张家界

    “仙凡共界武陵门，峡刲翠叠溪连瀑”，李白的这首七律将张家界的美景描绘成人间仙境令人无限向往。张家界头顶“世界自然遗产”“国家森林城市”光环，拥有绿水青山的自然资源，具有得天独厚的发展优势。但当地并不满足于此，抢抓新一轮城市发展机遇，着力引领张家界市实现“建设全域覆盖、智能高效的智慧城市”总体目标，加速建成基础设施共建共用，政务数据共享协同，智慧应用国内领先、智慧产业特别是智慧旅游产业重点突破，营商环境优良，极具张家界旅游城市特色和示范引领作用的智慧城市，形成可推广的“智慧张家界新模式”。

    云+X案例
    2019-12-13 0

  • 云计算管理工具：根植热土

    我们今天来看一下提供云计算的基础设施管理、配置管理及优化、数据集成、成本分析等方面工具的厂商动态。

    工具
    2019-12-10 0

  • 阿里云张建锋：数据成为经济发展的新生产要素

    12月3日，在2019阿里云广东峰会上，阿里云智能总裁张建锋表示，全面迈入数字经济时代，数据成为社会经济发展的新生产要素，云智能是新基础设施。

    阿里云
    2019-12-03 0

  • Gartner 发布2019年超融合魔力象限：新增深信服一员！

    近日，国际权威研究分析机构Gartner公布了2019全球《超融合基础设施魔力象限》报告。报告显示国内仅有三家云计算厂商进入2019超融合基础设施魔力象限，分别是深信服、华为、华云数据。其中深信服超融合（sangfor aCloud）凭借技术优势、技术服务、广泛用户实践和全球市场表现首次入围，成为榜单上新晋的超融合厂商。

    2019-11-26 0

  • 首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视

    一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这场盛会，深感荣幸。

    2019-11-08 0

  • 金山云变道超车，进入数字金融基础设施建设无人区

    金山云 多云管理 区块链 数字资产
    2019-11-07 0

  • 首次落地中国大陆的OpenInfra：中国对于开源做出的贡献力量已不可忽视

    一张标志着上海现代建筑地标的东方明珠海报，另一张展示着上海悠久历史的豫园景区海报，不仅向我们展示了这座城市浓厚的历史气息与现代化的繁荣，也让我们看到了OpenStack历经9年历史背后仍有着新鲜的科技气息。仅从这两张景色迷人且拥有时尚气息的两张海报，便能够看出此次开源基础设施峰会的用心良苦。没错，前身为OpenStack Summit的Open Infrastructure Summit首次落地中国大陆，而此次也正是阿丹第一次参加这项盛会，并感到十分荣幸。

    OpenStack 开源
    2019-11-05 0

  • i 智慧 | 深度广度并举，AWS容器服务再推利器！

    AWS在中国区域放出了一款“重量级”容器服务，名为 AWS Fargate，光环新网运营的 AWS 中国（北京）区域和西云数据运营的 AWS 中国（宁夏）区域均提供该项服务。 据悉这是一款可以适用于 Amazon ECS的计算引擎，主要帮助企业在生产过程中运行容器、却无需部署或者管理服务器，换句话说就是专注设计和构建应用程序，而不用挂心太多基础设施的“那些事儿”。

    2019-11-05

  • 深度广度并举，AWS容器服务再推利器！

    据晶少了解，国庆假期后的首个工作日，AWS就在中国区域放出了一款“重量级”容器服务，名为 AWS Fargate，光环新网运营的 AWS 中国（北京）区域和西云数据运营的 AWS 中国（宁夏）区域均提供该项服务。据悉这是一款可以适用于 Amazon ECS的计算引擎，主要帮助企业在生产过程中运行容器、却无需部署或者管理服务器，换句话说就是专注设计和构建应用程序，而不用挂心太多基础设施的“那些事儿”。

    2019-10-31 0

活动

独家定制

饮水思源、万象更新-数据库开源（杭州站）沙龙活动

立即报名

腾讯安全专区

3500人的专业安全团队与你同在

C课有道

CSDN云计算在线公开课

云中不可忽视的IaaS创新

IaaS市场高速增长，历久弥新

精品推荐

关于我们

关注「云计算」​

转载 & 投稿：songhui@csdn.net

商务合作：zhangjing@csdn.net