- 相关博文
- 最新资讯
-
3.x必须在java8环境为前提Common改进shell被重写 过时api方法可能被删除 向下兼容老版本命令hdfs改进（ec代替副本机制 50%提升空间利用率）删除编码方式支持两个以上的namenode（高可用 可用+备用）datanode平衡单个datanode管理多个磁盘目录。添加或替换磁盘导致datanode数据倾斜。现有hdfsbalanse没办法解决倾斜 ，使用新的diskbalance去cli解决对应临时端口冲突，改进yarn改进timeline历史
-
- 瑞 新
- 昨天
-
-
原文编注：近日，中科院院士、清华大学人工智能研究院院长张钹教授接受记者采访时认为，目前基于深度学习的人工智能在技术上已经触及天花板。从长远来看，必须得走人类智能这条路，最...
-
- 大数据周刊
- 2019年09月20日
-
-
下载MySQL下载路径：https://downloads.mysql.com/archives/community/解压MySQL：如解压到D:\Tools\mysql-5.7.27-winx64（注意不要放在中文路径、有空格或特殊字符的路径中）配置环境：右键 此电脑 -> 属性 ->高级系统设置->环境变量->系统变量名->新建变量名为：MYSQL_HOME变量值为：MySQL解压的根目录（如：D:\Tools\mysql-5.7.27-winx64）在系统
-
- 一只当归
- 21小时前
-
-
注意：建议各位看如下代码，一定要导入一份源码到自己本地电脑中哦，可以导入进行调试。流程代码我删除许多，保留重点。本章主要介绍的是，worker 开启，并与master通信流程，以及inbox收件箱outbox发件箱的创建。认真学习你可以收获许多哦，举例使用该inbox,outbox处理模式，可以嵌入到聊天程序当中哦，处理高并发请求。废话不多说，进入主题。park业务操作和数据传输相隔里，数据传输就交给netty，netty不涉及业务，提高netty服务器的响应时间，提高代码的复用性，降低耦合性。wor
-
- LinkStars
- 前天
-
-
新手如何用阿里云服务器Linux系统安装宝塔面板搭建WordPress博客网站呢？WordPress作为全球实用最广泛的CMS系统，以功能强大、扩展性强，插件众多，易扩充功能等特点，受到全球站长开发者青睐。而阿里云作为国内用户量最多的云服务器商，因此，本文以阿里云为例，详细介绍云服务器Linux系统如何安装宝塔面板搭建WordPress博客网站。新手如何用阿里云服务器Linux系统安装宝塔面板搭建WordPress博客网站呢？WordPress作为全球实用最广泛的CMS系统，以功能强大、扩展性强，插件众
-
- 星速云
- 前天
-
-
需求描述：前后端分离系统，用SpringBoot整合Spark API,调用大量数据（几百GB，上TB）进行处理计算，单机环境难以达到性能要求，此，需整合直接调用spark跑程序，且在集群跑…在此，一台测试服务器模拟，搭建伪分布spark集群，用standalone模式运行。文章目录一、集群环境二、项目配置环境一、集群环境包版本： 1.java1.8 2.spark 2.3.1 3.scala 2.11 4.CentOS Linux release 7.3.1611 (Core)
-
- 技多不压身
- 前天
-
-
RDD、DataFrame、DataSet 三者的关系➢ Spark1.0 => RDD➢ Spark1.3 => DataFrame➢ Spark1.6 => Dataset如果同样的数据都给到这三个数据结构，他们分别计算之后，都会给出相同的结果。不同是的他们的执行效率和执行方式。在后期的 Spark版本DataSet 有可能会逐步取代RDD和DataFrame 成为唯一的API 接口。三者的共性➢ RDD、DataFrame、DataSet 全都是 spark 平台下的
-
- Bug.object
- 前天
-
-
接口性能测试过程中，接口请求参数是根据一定的规则拼接后进行MD5加密后再进行传参，jmeter 可以通过Jython的Jar包执行python代码进行辅助测试，但是该Jar包只支持python2.7或python2.7以下版本。1.下载Jython jar包：http://www.jython.org/downloads.html。2.将下载的Jython jar包放到 jmeter lib ext文件夹下，并重启jmeter。3.线程组中添加 JSR223 Sampler，脚本语言选择python
-
- 异想有日天会开
- 昨天
-
-
1。新建任务2.配置源码管理，关联git仓库3.构建---》执行shelltime=`date +%d%m%d%H%M`cd /root/.jenkins/workspace/shanxiang-pcmvn clean package -Pprodif [ $? -ne 0 ]; then echo "====Build uboot failed!====" exit 1else cd /usr/local/apache-tomcat-7-8098_gw/w
-
- zzffhl
- 前天
-
-
文章目录概览Sparkmr问题Spark特征Spark生态系统对比Hadoop生态系统开发语言及运行环境Scala&Maven安装配置SparkFlink分布式计算框架（流处理）概览Spark、Flink、BeamBeam编写完适用于Spark、Flink使用Sparkmr问题mr->spark?开发不爽 mr两个过程速度不快 m存硬盘r存hdfs框架多样性 批处理 流式处理Spark特征http://spark.apache.org/速度快 内存和磁盘 都比mr快易
-
- 瑞 新
- 昨天
-
-
一，创建springboot项目大家随意创建一个 springboot 项目就行了，这里给大家展示一个半成品，稍后可以去gitee上下载源码。自己创建的话勾选 web 这个依赖即可。然后在本地测试一下自己写的接口，如果没问题，就可以发布了二，在对自己的项目进行打包1，找到右下角的Maven Projects，进行如下步骤2，说说这里面打包项目的坑，可能会遇到如下错误Failed to execute goal org.apache.maven.plugins:maven-resources-plu
-
- huisheng_qaq
- 前天
-
-
摘要最后：互联网测试人一波福利技术行业，一定要提升技术功底，丰富自动化项目实战经验，这对于你未来几年职业规划，以及测试技术掌握的深度非常有帮助。金九银十面试季，跳槽季，整理面试题已经成了我多年的习惯！下面有我近几年的收集和整理，整体是围绕着【软件测试】来进行整理的，主体内容包含：python自动化测试专属视频、Python自动化详细资料、全套面试题等知识内容。愿你我相遇，皆有所获！ 如果对软件测试、接口测试、自动化测试、面试经验交流。关注微信公众号：【伤心的辣条】 免费领取一份216页软件测..
-
- 测试萌萌
- 昨天
-
-
之前做的LVS-Keepalived群集不够完善，现在重新完善下。搭建环境：主DR 服务器（负载调度器）：192.168.241.3备DR 服务器（负载调度器）：192.168.241.6Web 服务器1：192.168.241.4Web 服务器2：192.168.241.5NFS服务器：192.168.241.7VIP：192.168.241.2001.配置负载调度器（192.168.241.3、192.168.241.6）systemctl stop firewalld.servic
-
之前自己搭建过Hadoop高可用（HA）。最近自己整理了下也参考了些其他文章，方便自己之后再次使用，也方便大家在搭建时做一个参考。自动HA节点有如下进程配置正确实验环境配置如下：hadoop01 namenode、datanode、nodemanager、journalnode、zookeeper(也就是QuorumPeerMain)hadoop02 namenode、resourcemanager、datanode、nodemanager、journalnode、zookeeper(
-
- 韩博林
- 昨天
-
-
-
要想理解持续集成和持续部署，先要了解它的部分组成，以及各个组成部分之间的关系。下面这张图是我见过的最简洁、清晰的持续部署和集成的关系图。
-
从代码到 Docker、Kubernetes、Istio、Knative……，或许是时候重新思考从代码到云的编程了...
早些时候，开发人员只需编写程序、构建，然后运行。如今，开发人员还需要考虑各种运行方式，作为可执行文件在机器上运行（很有可能是虚拟机），还是打包到容器中；将容器部署到Kubernetes中，还是部署到serverless的环境中或服务网格中。然而，这些部署方式并不是开发人员编程经验的一部分。开发人员必须以某种方式编写代码才能在特定的执行环境中正常工作，因此编程时不考虑这些问题是不行的。
-
-
-
Docker容器已经从一种锦上添花的技术转变成了部署环境的必需品。有时，作为开发人员，我们需要花费大量时间调试或研究Docker工具来帮助我们提高生产力。每一次新技术浪潮来临之际，我们都需要花费大量时间学习。
-
近日，阿里云对外宣布其容器服务调度GPU云服务器启动加速计算，最快只需60秒即可完成新冠病毒的核酸对比工作；同时将向医疗科研机构、疾控中心等一线病毒研究机构免费开放基因计算服务，技术可大幅提升宏基因组测序、疫苗研发相关的处理效率。基于此，晶少专程采访了阿里云基因计算服务AGS负责人、高级技术专家李鹏，集中呈现针对GPU和容器技术大幅提升核酸比对速度的有关细节以及关于阿里云基因计算服务（AGS）的诸多信息。
-
6 个步骤，教你在Ubuntu虚拟机环境下，用Docker自带的DNS配置Hadoop | 附代码
最近，作者整理了一套Hadoop搭建方案。最后的镜像大小1.4G多，使用docker子网，容器重新启动不需要重新配置/etc/hosts文件。 配置过程中参考了如下博客，有些细节问题这些博客里面解释的更加详细。
-
自从Docker在2013年初上线以来，就与程序员及系统管理员之间产生了一种爱恨交加的奇妙关系。虽然与我交谈过的一些经验丰富的的开发人员都非常不喜欢容器化(稍后会详细介绍)，但是为什么许多大公司，包括eBay、Twitter、Spotify和Lyft在内，都在他们的生产环境中采用了Docker呢？
-
稳定、可扩展、模块化、简化部署过程、版本控制……一文看懂 Kubernetes 到底如何运用！...
说实话，我是个Kubernetes爱好者。Kubernetes是软件开发的重要一步。当我遇到它时，我就想：“这就是将容器融入生产的方式”。我没有任何犹豫就投入了它的怀抱。有成千上万的架构师像我一样，已经深深爱上这项技术。
-
Docker 上手很容易，但如果将其应用于生产环境，则需要对它有更深入的理解。只有这样，才能确保应用符合我们的预期，或在遇到问题时可及时解决。所以，要想真正掌握 Docker 的核心知识，只靠网络上零散的信息往往是不够的，必须系统性地学习。
-
“云原生全家桶“KubeSphere 如何让企业从容迈进云原生时代？
最近两年，云原生大火。究其原因，“数字化转型”几乎成为所有企业当下最迫切的需求，在这样的趋势下，恰逢新旧IT架构升级的契机，容器、微服务等技术与理念得以发挥所长。众多“上云”企业，寄望于业务能够快速迭代、缩短交付周期、弹性敏捷以及成本控制更优……以支持现有业务的快速发展及创新。
-
Docker 上手很容易，但如果将其应用于生产环境，则需要对它有更深入的理解。只有这样，才能确保应用符合我们的预期，或在遇到问题时可及时解决。所以，要想真正掌握 Docker 的核心知识，只靠网络上零散的信息往往是不够的，必须系统性地学习。
-
NVIDIA今日宣布，在NVIDIA GPU Cloud (NGC)容器注册上，向交通运输行业开源NVIDIA DRIVE™自动驾驶汽车开发深度神经网络。
-
云改变了IT业态和市场格局，催生了应用大发展的时代，企业可以更加专注于构建符合其愿景的、更具生命力的业务创新。全面使用云服务构建软件的时代已经到来，在这个大背景下，云原生的概念被提出并迅速具象化，而以容器为代表的云原生技术，作为提升云化服务能力的最佳选择，也得以快速发展。
-
四大开源项目联合发布 腾讯已成Github全球贡献前十公司！
近日在Techo开发者大会上，腾讯正式对四大重点开源项目进行了联合发布，包括分布式消息中间件TubeMQ、基于最主流的 OpenJDK8开发的Tencent Kona JDK、分布式HTAP数据库 TBase，以及企业级容器平台TKEStack。
-
加速布局无服务器生态，腾讯云与Serverless.com达成全球战略合作！
在云计算技术领域，“Serverless（无服务器）”作为一种新型的软件设计架构正在快速崛起。作为继虚拟机、容器后的第三代通用计算平台，Serverless技术也一直是腾讯云原生的重点发力领域。 近日，在由腾讯云主办的首届Techo开发者大会上，腾讯云宣布与全球最流行的Serverless开发平台Serverless.com达成战略合作，成为 Serverless.com的全球战略合作伙伴以及大中华区独家合作伙伴。截至目前，Serverless.com拥有百万级别的活跃应用程序以及50000+的日下载量。
-
AWS在中国区域放出了一款“重量级”容器服务，名为 AWS Fargate，光环新网运营的 AWS 中国（北京）区域和西云数据运营的 AWS 中国（宁夏）区域均提供该项服务。 据悉这是一款可以适用于 Amazon ECS的计算引擎，主要帮助企业在生产过程中运行容器、却无需部署或者管理服务器，换句话说就是专注设计和构建应用程序，而不用挂心太多基础设施的“那些事儿”。
2019.11.05 -
据晶少了解，国庆假期后的首个工作日，AWS就在中国区域放出了一款“重量级”容器服务，名为 AWS Fargate，光环新网运营的 AWS 中国（北京）区域和西云数据运营的 AWS 中国（宁夏）区域均提供该项服务。据悉这是一款可以适用于 Amazon ECS的计算引擎，主要帮助企业在生产过程中运行容器、却无需部署或者管理服务器，换句话说就是专注设计和构建应用程序，而不用挂心太多基础设施的“那些事儿”。
-
活动
-
2020.12.16
-
2020.12.16
-
2021.01.31
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui#csdn.net
商务合作：xieying#csdn.net