• 相关博文
  • 最新资讯

  • Hadoop集群搭建(步骤图文超详细版)

    选择理由，精准屏蔽

    一、前置条件需要安装下载方法Vmware Workstation官网下载链接Centos7系统百度网盘下载 ， 提取码：t6vajdk1.8官网下载链接MobaXterm百度网盘下载，提取码：f64vhadoop官网下载链接(最新)二、安装Centos系统三、配置Centos系统静态IP（很重要！）这里我之前的文章写过，这里就不详细讲了，有需要的可以看看我这篇文章：配置教程注意：不配置的话Centos系统无法连网
    huisoul
    HuiSoul
    昨天
    阅读数 443
    评论

  • 5万成员丨CSDN 大数据领域网红社区！

    选择理由，精准屏蔽

    一、社区愿景我的梦想很大，大到致力于打造大数据领域第一社区，赋能中国技术社区蓬勃发展。我的“格局”很小，小到每一篇优质文章，都会不吝啬加精，置顶。
    weixin_39032019
    不吃西红柿丶
    昨天
    阅读数 1314
    评论

  • Overloaded method foreachBatch with alternatives

    选择理由，精准屏蔽

    前言本文隶属于专栏《Spark异常问题汇总》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！本专栏目录结构和参考文献请见 Spark异常问题汇总正文问题描述Spark 编译报错：Error:(34, 25) overloaded method foreachBatch with alternatives: (function: org.apache.spark.api.java.function.VoidFunction2[org.apache.spark.sq
    Shockang
    Shockang
    昨天
    阅读数 186
    评论

  • Elasticsearch(一) 安装和配置启动

    选择理由，精准屏蔽

    前言: 本环境在阿里轻量级服务器(Ubuntu)上 执行(一) 环境搭建1.1 java环境环境：ES 为 java 语言编写， 需要有 java 环境版本说明：ES 5 需要 Java 8 及以上的版本ES 7 开始内置了 Java 环境apt updateapt install default-jre // 下载jdk环境验证输入: java --version 返回以下代码算成功1.2 Elasticsearch下载通过官方下载地址挑选你喜欢的下载包下载地址: h
    weixin_44544813
    king丶绝世佳友
    前天
    阅读数 400
    评论

  • 数据采集与清洗基础习题（四）Pandas初体验，头歌参考答案

    选择理由，精准屏蔽

    数据采集习题参考答案，会持续更新，点个关注防丢失。创作不易，一键三连给博主一个支持呗。为了方便查找，已按照头歌重新排版，朋友们按照头歌所属门类查找实训哦，该篇为Pandas。文章目录实训一：Pandas初体验第一关：了解数据处理对象--Series编程要求Pandas中的数据结构第一关答案第二关：了解数据处理对象-DataFrame编程要求相关知识第二关答案第三关：读取CSV格式数据编程要求相关知识第三关答案第四关：数据的基本操作——排序
    qq_48774513
    饲养猿
    昨天
    阅读数 436
    评论

  • SpringBoot基于Zookeeper和Curator生成唯一ID

    选择理由，精准屏蔽

    目录一、简介二、maven依赖一、简介  在分布式系统中，为了保证同一时间只能由一个客户端对共享资源操作，我们通常采用加锁来实现，常见有三种方式：基于数据库实现的分布式锁基于zookeeper实现的分布式锁基于redis实现的分布式锁  而在使用redis实现时Redisson是官方推荐的一种方案也是我们今天的主角。二、maven依赖...
    Alian_1223
    嘉禾嘉宁papa
    昨天
    阅读数 380
    评论

  • 2021年秋招总结

    选择理由，精准屏蔽

    学历：211本+985硕实习：无项目：一个简易的MVC应用网站论文：SCI二区四作（划水），EI会议一作，SCI在投一作目标：国企，其中包括银行，运营商，中石油，中石化等，还有研究所可做考虑，国网因为时间较晚，作最后备选。地点：北京或天津，更偏向于天津。按照收到回复的时间先后顺序作整理1. 中国农业银行所投岗位：研发中心，总行2个岗位，天津分行1个我的网申时间：2021/08/23，笔试时间：2021/09/06（应该是提前批或第一批）农行是所有银行里面开始招收最早的，抢人很激烈，如果打
    qq_41937076
    往往
    昨天
    阅读数 306
    评论

  • Linux安装Erlang、RabbtiMQ，添加新的用户、RabbitMQ常用命令等

    选择理由，精准屏蔽

    安装或者使用所有组件都是从官网入手RabbitMQ官网点击Get Started进入开始页面进行下载准备下载对应的版本（我这里是CentOS）安装Erlang环境RabbitMQ是Erlang语言编写的，所以在安装RabbitMQ之前， 安装之前先查看官网RabbitMQ与Erlang的版本对应关系。使用PackageCloud提供的脚本安装Erlang进入PackageCloud官网找到需要的Erlang版本# 1:执行脚本依赖curl -s https://pack
    weixin_45528650
    银魄清辉自夜凝
    前天
    阅读数 254
    评论

  • maven版本和jdk版本不一致导致的项目冲突！！（坑死）

    选择理由，精准屏蔽

    问题描述：最近在弄一个Hadoop项目，在IDEA上操作HDFS上传下载文件，我的maven版本是3.6.3，然后Hadoop版本是2.6.0运行报错如下：Exception in thread “main” java.io.IOException: No FileSystem for scheme: hdfs解决方案：我是通过更换maven版本来解决的这个问题，又下了一个3.6.1的版本。因为Hadoop2.6.0的版本使用的jdktools包是1.6，maven不支持，所以会导致错误。注意记得
    weixin_44911081
    万家林
    昨天
    阅读数 177
    评论

  • Elasticsearch 中为什么选择倒排索引而不选择 B 树索引

    选择理由，精准屏蔽

    Elasticsearch 中为什么选择倒排索引而选择 B 树索引前言为什么全文索引不使用 B+ 树进行存储全文检索正排索引倒排索引倒排索引如何存储数据FOR 压缩RBM 压缩倒排索引如何存储字典树（Tria Tree）FSTFSM构建 FST总结前言索引可能大家都不陌生，在用关系型数据库时，一些频繁用作查询条件的字段我们都会去建立索引来提升查询效率。在关系型数据库中，我们一般都采用 B 树索引进行存储，所以 B 树索引也是我们接触比较多的一种索引数据结构，然而在 es 中，进行全文搜索的时候却并没有选
    zwx900102
    双子孤狼
    昨天
    阅读数 222
    评论

  • MapReduce过程详解（非常全）

    选择理由，精准屏蔽

    MapReduce算法执行过程（1）MapReduce框架使用InputFormat模块做Map前的预处理，比如验证输入的格式是否符合输入定义；然后，将输入的文件切分为逻辑上的多个InputSplit，InputSplit是MapReduce对文件进行处理和运算的实际单位（逻辑概念），每个InputSplit没有对文件进行实际切割，只是记录了要处理的数据的位置和长度。（2）InputSplit是逻辑切分，所以需要通过RecordReader(RR)根据InputSplit的信息来处理InputSplit
    qq_45725767
    Love in BigData-渐进者
    昨天
    阅读数 193
    评论

  • docker部署Hadoop、HBase环境（Centos7系统）

    选择理由，精准屏蔽

    一、安装docker1.下载离线包Index of linux/static/stable/x86_64/2.
    u010588886
    u010588886
    昨天
    阅读数 182
    评论

  • 【推荐】如何将枯燥的大数据呈现为可视化的图和动画？

    选择理由，精准屏蔽

    随着我国数字化建设的逐渐深入，越来越多的企业认识到数据价值的重要性，纷纷用上了工作视觉化展示利器——可视化大屏。然而做一个可视化大屏，免不了要用到Echarts / HighCharts / D3这些框架，如果追求3D效果，还要加上WebGL与协调设计的时间，对于研发而言确实劳心又费力。那么，有没有一款低代码，还是免费开源的工具可以帮助用户快速做个大屏呢？推荐一款可视化工具—FlyFish。飞鱼平台(FlyFish)是云智慧公司自主设计、研发的一款低门槛、高拓展性的低代码应用开发平台，为大屏开发
    Sharon0408
    云智慧技术社区
    昨天
    阅读数 156
    评论

  • 2021-10-26

    选择理由，精准屏蔽

    HDFS写数据流程图
    m0_62617758
    m0_62617758
    23小时前
    阅读数 120
    评论

  • 2021-10-25

    选择理由，精准屏蔽

    优化选择排序选择排序的思想：第一次外层循环中找出数组中的最小值，放到数组最前端，接下来要遍历的长度就是[1,arr.length-1],(本身可遍历的是[0,arr.length-1])，第二次下来就是[2,arr.length-1]…优化思想：在一次外层外层循环中找出最小值和最大值，将最小值放到数组开头，将最大值放到数组末尾，这样一次循环之后数组可遍历的长度是[1,arr.length-2],效率比起原来提升了一倍，当最大值和最小值都走到中心的时候，可以进行判断是已经排好序，然后直接结束循环，这样又可
    qq_45134562
    不夸张怕你不相信
    前天
    阅读数 133
    评论

  • 学习笔记Kafka（五）—— Kafka 开发环境配置及Producer API

    选择理由，精准屏蔽

    一、开发环境说明1、创建Maven工程1.1、开发环境Maven && JDK 1.2、Pom配置Compiler Configuration 在pom.xml添加：<properties> <maven.compiler.target>1.8</maven.compiler.target> <maven.compiler.source>1.8</maven.compiler.so
    qq_46485161
    别呀
    23小时前
    阅读数 166
    评论

  • HDFS写数据流程

    选择理由，精准屏蔽

    在了解HDFS写数据流程之前，我们先来了解HDFS是什么，干什么用的。 HDFS可以实现大数据的存储，并处理巨大的文件。而HDFS处理巨大文件的思路是将巨大的文件割成小块文件进行存储，称为”数据块分布式处理“。 接下来让我们看一下HDFS的写数据流程！其中Namenode（nn）是名称节点用来管理文件系统的命名空间。Datenode(dn)数据节点是分布式文件系统HDFS的工作节点，负责数据的存储和读取。1.客户端向Namenode发出写数据请求。2.nn检查目...
    Guo142326
    Guo142326
    23小时前
    阅读数 171
    评论

  • 03-Eureka学习

    选择理由，精准屏蔽

    Eureka服务注册与发现Eureka包含两个组件:Eureka Server和Eureka client .Eureka Server提供服务注册服务，各个节点启动后，会在EurekaServer中进行注册，这样Eureka Server中的服务注册表中将会村粗所有可用服务节点的信息，服务节点的信息可以在界面中直观的看到。EurekaClient是一个Java客户端，用于简化EurekaServer的交互，客户端同时也具备一个内置的，使用轮询负载算法的负载均衡器。在应用启动后，将会向EurekaSe
    xixihaha_coder
    java全栈_coder
    昨天
    阅读数 164
    评论

  • BI与报表的区别

    选择理由，精准屏蔽

    接触BI时间不是很长，但是对于报表的认识可以说是从入行起就经常听说。像我们对于表表的认识，大多数就是类似于Excel表格一样，做出的各种列表式数据展示。做的更好一点的如在页面中增加一些图表，增加报表的可读性。近几年，对于商业智能，数据可视化，数据钻取，报表套打，BI，大数据分析，数据决策，数据辅助等等各种数据分析行业的名词可以说是迎面扑来，但是对于很多没了解过的人来说，这些词既熟悉又陌生。在这里就简单给大家概述一下，对于现在数据分析行业中的两大革命性产物，商业智能BI，商业智能报表做一个简单又详细的
    qq_20104119
    滴酒_醉红颜
    22小时前
    阅读数 157
    评论

  • 知识图谱|学习笔记|《知识图谱概念与技术》肖仰华——第1章 知识图谱概述

    选择理由，精准屏蔽

    知识图谱概述文章目录知识图谱概述1.1 知识图谱的基本概念1.1.1 知识图谱的狭义概念1.1.2 知识图谱的广义概念1.2 知识图谱的历史沿革1.2.1 知识图谱溯源1.2.2 大数据知识工程1.3 知识图谱的研究意义1.3.1 知识图谱的认知智能的基石1.3.2 知识引导成为解决问题的重要方式之一1.4 知识图谱的应用价值1.4.1 数据分析1.4.2 智慧搜索1.4.3 智能推荐1.4.4 自然人机交互1.4.5 决策支持1.5 知识图谱的分类1.5.1 知识图谱中的知识分类1.5.2 知识图谱的领
    HZCsummer
    YOLO_OnePiece
    昨天
    阅读数 132
    评论
加载中...

  • 打造大数据和AI能力底座 联通大数据深度参与“新基建”

    大数据 AI 联通 新基建
    2020-04-24 0

  • 医疗保健、零售、金融、制造业……一文带你看懂大数据对工业领域的影响！...

    随着大数据技术的兴起，工业领域在很大程度上发生了变化。智能手机和其他通讯方式的使用迅速增加，使得每天都能收集大量数据。以下是大数据对工业领域的影响。

    大数据
    2020-03-25 0

  • 区块链和大数据一起能否开启数据完整性的新纪元？

    每当提到区块链一词时，许多人都会将其与比特币等加密货币联系起来。这项技术通过加快交易速度、提供隐私和透明以及其他更多功能，确实改变了虚拟货币的世界。

    区块链 大数据
    2020-03-16 0

  • MySQL 狠甩 Oracle 稳居 Top1，私有云最受重用，大数据人才匮乏！ | 中国大数据应用年度报告...

    科技长河，顺之者昌，错失者亡。在这个技术百态之中，中国专业的 IT 社区CSDN 创始人&董事长蒋涛曾多次在公开活动中表示，开发者是对技术变革最敏感的人群。这不仅源于开发者、工程师创建了助力这个时代蜕变的工具，他们还极具前瞻性地缔造了真实世界之外的虚拟、数字化世界。

    云计算 大数据
    2020-03-16 0

  • 大数据成长之路：谈谈那些必须学习的Linux基础知识

    这里主要介绍学习大数据过程中用到的Linux基础知识，现在主攻的方向是大数据开发，欢迎大家共同交流。

    Linux
    2020-03-12 0

  • 数据科学家是个性感的工作？我信你个鬼！

    根据《哈佛商业评论》的说法，数据科学家是21世纪最性感的工作。在现在这个大数据的世界中，数据科学家们用AI 或深度学习方法来发掘宝贵的商业见解。

    数据
    2020-03-10 0

  • 大神如何一招完美解决Hadoop集群无法正常关闭的问题

    相信对于大部分的大数据初学者来说，一定遇见过Hadoop集群无法正常关闭的情况。有时候当我们更改了Hadoop内组件的配置文件后，必须要通过重启集群来使配置文件生效。

    2020-02-20 0

  • 写给大数据从业者：数据科学的5个陷阱与缺陷

    这篇分享主要总结了数据从业人员在实践中可能遇到的陷阱与缺陷。跟其他新起的行业一样，数据科学从业人员需要不停的去考虑现在，考虑未来；需要不断的斟酌工作方法的合理性，正确性。思索不断，才能前行。

    2020-02-20 0

  • 华南地区最大数据中心上线 阿里云河源数据中心正式开服

    2月18日，阿里云在官网宣布，河源数据中心正式对外提供服务。这是华南地区规模最大的绿色数据中心，可容纳超过30万台服务器，作为深圳地域的新可用区为华南地区上百万企业客户提供领先的云计算、人工智能、物联网等服务。

    2020-02-18 0

  • 如何使用5个Python库管理大数据？

    如今，Python真是无处不在。尽管许多看门人争辩说，如果他们不使用比Python更难的语言编写代码，那么一个人是否真是软件开发人员，但它仍然无处不在。

    大数据 python
    2020-02-17 0

  • 详解异构计算FPGA基础知识

    随着云计算，大数据和人工智能技术应用，单靠CPU已经无法满足各行各业的算力需求。海量数据分析、机器学习和边缘计算等场景需要计算架构多样化，需要不同的处理器架构和GPU，NPU和FPGA等异构计算技术协同，满足特定领域的算法和专用计算需求。今天，笔者带大家详细了解下FPGA技术。 FPGA是英文Field Programmable Gate Array简称，即现场可编程门阵列。它是在PLA、PAL、GAL、CPLD等可编程器件的基础上进一步发展的产物。它是作为专用集成电路(ASIC)领域中的一种半定制电路，既解决了定制电路的不足，又克服了原有可编程器件门电路数有限的缺点。

    2020-01-14 0

  • 详解GPU技术关键参数和应用场景

    随着云计算，大数据和人工智能技术发展，边缘计算发挥着越来越重要的作用，补充数据中心算力需求。计算架构要求多样化，需要不同的CPU架构来满足不断增长的算力需求，同时需要GPU，NPU和FPGA等技术加速特定领域的算法和专用计算。以此，不同CPU架构，不同加速技术应用而生。

    GPU CPU
    2020-01-02 0

  • 云+X案例展 | 电商零售类：WakeData助力叁拾加数字化变革

    在新零售时代下，各行业都在寻求数字化转型、发展智慧零售模式。而作为新零售的主赛道生鲜行业来说，运营端需要从即时性消费需求出发，加强线下场景布局，提升用户全渠道消费体验。其中水果是生鲜里消费者喜爱程度及消费频次较高的品类，具有很强的互联网基因，但水果行业的数据构成极其复杂，要考虑很多变量，这就需要借助线下大数据构建数字化运营及经营系统。

    云+X案例
    2019-12-31 0

  • 云+X案例展 | 金融类：金山云为新网银行重塑金融服务提供云计算动力

    作为国内第三家、中西部首家互联网银行，新网银行从创立起，就注定将走上一条与众不同之路。按照新网银行高层的话说，“与其说我们是一家银行，不如说我们是一家拿了银行牌照、专注于大数据驱动的金融科技公司”，这无疑是点出了新网银行的特别之处——依靠大数据风控和金融科技能力来驱动业务运营，实现金融和科技的融合。

    云+X案例
    2019-12-25 0

  • 云+X案例展 | 金融类：荣之联助力君康人寿构建新一代数据中心

    近年来，互联网、大数据、云计算和物联网等行业的蓬勃发展，对数据的存储、交换、计算等的应用需求不断增加，使得大数据发展需求下对上游基础设施领域的需求持续旺盛，促进了数据中心（简称“IDC”）需求的不断增加。同时，各国5G技术的发展和商用化的推广又进一步促进了IDC行业爆发增长。未来，IDC行业必将成为物联网、云计算及5G技术的不断完善与发展下又一风口。

    云+X案例
    2019-12-19 0

  • 七大新品集中亮相，腾讯云AI大数据全线升级！

    近日腾讯云在北京举行大数据AI新品发布会。会上，腾讯云带来了在大数据与AI领域的最新研究成果，包括AI换脸甄别技术AntiFakes、腾讯星图以及企业画像平台等七大重磅新品，并对AI、大数据产品进行全线升级，致力于为用户带来更精细化的应用场景、更强大的技术能力以及更低的应用成本，全面降低企业AI技术应用门槛。

    腾讯云 AI 人工智能
    2019-12-11 0

  • 腾讯云全面更新数据智能服务全景图！

    近日在腾讯云AI大数据新品发布会上，腾讯云副总裁王龙向听众全面介绍了当前腾讯云数据智能服务的全景布局。针对目前整体AI行业的发展趋势，他表示过去一招鲜的发展模式已经难以为继，取而代之的是真正能够产生价值的、端到端的、全面的AI解决方案，并且随着技术的不断演进，企业进入和使用数据智能领域的门槛将继续大幅降低。

    腾讯云 智能
    2019-12-11 0

  • 阿里云提出“云+Fintech”新金融战略 已助上万家金融机构上云

    12月3日，阿里云峰会广东期间，阿里巴巴副总裁、阿里云智能数字政府事业部总裁许诗军表示，目前阿里云已成为中国数字政府大数据整体市场第一，也是数字政府大数据基础平台软件市场第一。

    阿里云
    2019-12-03 0

  • 阿里云数字政府市场份额第一，同比增速102.57%

    12月3日，阿里云峰会广东期间，阿里巴巴副总裁、阿里云智能数字政府事业部总裁许诗军表示，目前阿里云已成为中国数字政府大数据整体市场第一，也是数字政府大数据基础平台软件市场第一。

    阿里云
    2019-12-03 0

  • 2019年技术盘点云数据库篇（一）：UCloud专家谈云数据库：千锤百炼 云之重器

    公有云逐渐成为企业运行 IT 设施的新趋势，那么作为企业最核心的系统—数据库，数据上云也成为大数据时代的必然选择。对企业来说，数据可视为其命脉，因此数据迁移上云就意味着将企业“命脉”搬到云平台。事实上，数据上云有两种形式，数据库直接上云或者选择云数据库，而云数据库利用其云原生的优势具备了许多过去数据库产品不具备的优势，包括可靠性、弹性、存储容量以及成本等，正逐渐被更多的企业所接受。

    云数据库 数据库
    2019-11-27 0
每页显示 共24条数据 < 1 2 >      到第 页 GO

活动

独家定制

饮水思源、万象更新-数据库开源（杭州站）沙龙活动

立即报名

腾讯安全专区

3500人的专业安全团队与你同在

C课有道

CSDN云计算在线公开课

云中不可忽视的IaaS创新

IaaS市场高速增长，历久弥新

精品推荐

关于我们

关注「云计算」​

转载 & 投稿：songhui@csdn.net

商务合作：zhangjing@csdn.net