- 相关博文
- 最新资讯
-
你是否正面临这些挑战？- 本地开发的机器学习模型难以扩展至TB级数据- Spark集群资源利用率不足，任务调度混乱- 数据处理 pipeline 缺乏版本控制，结果难以复现- Jupyter Notebook 与生产环境代码割裂，维护成本高本文将系统讲解如何通过Kedro与Databricks的深度集成，构建企业级数据科学平台。通过实战案例，你将掌握从本地开发到Databricks集群...
-
- 伏葵飚Anastasia
- 昨天
-
-
在当今大数据时代，数据量呈爆炸式增长，如何从海量的数据中提取有价值的信息并以直观易懂的方式呈现给用户，成为了一个关键问题。数据可视化界面设计的目的就是将复杂的数据转化为图形、图表等可视化元素，帮助用户快速理解数据的含义和趋势，从而做出更明智的决策。本文的范围涵盖了大数据领域数据可视化界面设计的各个方面，包括核心概念、算法原理、数学模型、项目实战、实际应用场景以及相关的工具和资源等。通过对这些内容的详细阐述，旨在为从事大数据可视化界面设计的专业人员、数据分析师以及相关领域的研究人员提供全面的指导和参考。
-
- AI应用架构探索者
- 昨天
-
-
在当今大数据时代，数据的价值愈发凸显，而数据安全问题也成为了企业和组织面临的重要挑战。Spark作为大数据处理的主流框架，广泛应用于各种数据源的处理，如Hadoop分布式文件系统（HDFS）、关系型数据库、NoSQL数据库等。确保Spark数据源的安全性，对于保护企业的核心数据资产、遵守法规要求以及维护用户信任至关重要。本文的目的在于详细介绍Spark数据源安全配置的相关知识和技术，帮助读者了解如何在Spark环境中对不同类型的数据源进行安全配置。
-
- AI应用架构探索者
- 17小时前
-
-
在大数据时代，我们面临着海量的数据，但这些数据往往存在各种质量问题，其中数据不平衡是一个较为突出的问题。数据不平衡会对机器学习和数据分析模型的性能产生严重影响，导致模型对少数类样本的识别能力较差。本文的目的是深入探讨大数据领域中数据不平衡问题的挑战，并介绍一系列有效的应对方法，包括过采样、欠采样、代价敏感学习等。范围涵盖了数据不平衡问题的基本概念、核心算法原理、实际应用案例以及相关工具和资源的推荐。本文将按照以下结构进行组织：首先介绍数据不平衡问题的相关背景知识，包括术语定义和概念解释；
-
- AI应用架构探索者
- 昨天
-
-
Git 是目前最主流的分布式版本控制系统，凭借其高效的分支管理、本地提交机制以及强大的协作能力，已成为现代软件开发不可或缺的工具。本章将从 Git 的基本概念入手，帮助读者理解其核心机制，并以 64 位 Windows 系统为例，详细介绍 Git 的下载、安装与基础配置流程。TortoiseGit 是一款开源的 Git 图形界面客户端，专为 Windows 用户设计。其最大特点在于与 Windows 资源管理器无缝集成，允许用户通过右键菜单执行 Git 操作，从而避免了命令行操作的繁琐性。
-
- 温铁军
- 前天
-
-
本文章旨在深入探讨大数据领域数据建模在教育大数据中的应用。通过实际案例分析，展示如何利用数据建模技术对教育数据进行有效处理和分析，以支持教育决策、提升教学质量和促进学生个性化学习。文章的范围涵盖教育大数据的收集、清洗、建模、分析以及实际应用等多个环节，通过具体案例详细阐述每个环节的操作和技术实现。本文将按照以下结构进行阐述：首先介绍教育大数据和数据建模的核心概念与联系，包括相关原理和架构；接着详细讲解核心算法原理和具体操作步骤，并给出Python源代码示例；
-
- 大厂资深架构师
- 23小时前
-
-
你是否还在为流处理系统中的数据异常头疼？实时数据管道中，传统批处理验证工具难以应对高速流动的无界数据流，导致数据质量问题发现滞后、故障排查困难。本文将系统讲解如何基于Great Expectations构建实时数据监控体系，通过微批处理架构实现毫秒级数据质量检测，解决流处理场景下的三大核心痛点：- **数据漂移检测延迟**：传统T+1验证无法应对实时决策场景- **资源消耗失控**：全量验证...
-
你是否曾在大型地图移动时遭遇Unciv帧率骤降？是否好奇为何相同硬件下不同场景的渲染效率差异显著？本文将从图形渲染底层机制切入，全面剖析Unciv基于OpenGL ES的渲染架构，通过实测数据揭示性能瓶颈，并深入探讨迁移至Vulkan API的可行性与潜在收益。作为一款跨平台开源策略游戏，Unciv的图形优化历程为移动设备上的3D渲染提供了宝贵参考案例。读完本文你将获得：- 理解Unciv分...
-
当你面对日均10TB的实时数据流，却因连接器性能不足导致数据积压时；当你花费数周调试Exactly-Once语义，却仍面临数据重复问题时——你需要的不仅是一个连接器，更是一套经过工业级验证的数据传输解决方案。SeaTunnel Kafka连接器凭借**毫秒级延迟**、**99.99%可用性**和**无缝扩展能力**，已成为多家大型互联网企业的首选数据集成组件。本文将从架构设计到性能调优，全方位解锁...
-
- 柳嵘英Humphrey
- 昨天
-
-
华为云TaurusDB计算存储分离架构：让数据“身”分离，“心”凝聚
在2019年HC大会上，华为重磅推出最新一代高扩展海量存储分布式数据库——TaurusDB，它拥有一个最大的特点就是将存储和计算以一种分离的架构形式运行。很多人就会问到，华为云为什么会设计这款产品？核心竞争力是什么？对比原生MySQL的优势有哪些？借此时机，CSDN记者有幸采访到了华为云TaurusDB数据库资深技术专家，现在就请他来为我们一一解答。
-
不管我们是不是技术迷，无可否认的是，现在我们各自的生活都对互联网产生了高度依赖。在这个各种社交软件都离不开物联网设备的社会，它们以各式各样的方式将我们与网络世界连接起来。
-
-
2019年技术盘点云数据库篇（一）：UCloud专家谈云数据库：千锤百炼 云之重器
公有云逐渐成为企业运行 IT 设施的新趋势，那么作为企业最核心的系统—数据库，数据上云也成为大数据时代的必然选择。对企业来说，数据可视为其命脉，因此数据迁移上云就意味着将企业“命脉”搬到云平台。事实上，数据上云有两种形式，数据库直接上云或者选择云数据库，而云数据库利用其云原生的优势具备了许多过去数据库产品不具备的优势，包括可靠性、弹性、存储容量以及成本等，正逐渐被更多的企业所接受。
-
随着移动互联网、信息技术等创新发展，数据量呈指数级爆发式增长并表现在多个方面，即规模扩张、结构多元化的数据新形态；业务升级转型带来的场景化需求数据新部署；市场细分带来的数据应用新模式以及承载行业发展，发挥核心资源池地位的数据新价值等。据IDC预测，全球数据圈将从2018年的33ZB增至2025年的175ZB，实现5倍以上的增长。在新数据时代，数据在数据形态、部署环境、应用模式和价值需求等方面均出现了更为精细化的需求，应对数据爆发压力，欲将海量的连接、微秒级的延迟、极高的性能体验为我所用，创新存储价值则变得势在必行。
-
-
点赞功能大家都不会陌生，像微信这样的社交产品中都有，但别看功能小，想要做好需要考虑的东西还挺多的，如海量数据的分布式存储、分布式缓存、多IDC的数据一致性、访问路由到机房的算法等等。
-
近日，开源数据库厂商MongoDB与阿里云在北京达成战略合作，作为合作的第一步，最新版MongoDB 4.2数据库产品正式上线阿里云平台。
-
Gartner 发布2019年超融合魔力象限：新增深信服一员！
近日，国际权威研究分析机构Gartner公布了2019全球《超融合基础设施魔力象限》报告。报告显示国内仅有三家云计算厂商进入2019超融合基础设施魔力象限，分别是深信服、华为、华云数据。其中深信服超融合（sangfor aCloud）凭借技术优势、技术服务、广泛用户实践和全球市场表现首次入围，成为榜单上新晋的超融合厂商。
-
破题大数据应用发展难点，探索城市大数据发展之路——TalkingData正式发布“城市大数据场景创新平台”
2019年11月25日，T11 2019暨TalkingData数据智能峰会在京成功举办。会议期间，TalkingData正式发布“城市大数据场景创新平台”，并与武汉市东湖高新区签订“TalkingData华中研发总部、全国交付总部落户武汉东湖高新区”合作协议，与数睿科技、脉策数据、万商联信、爱家物联等多家合作伙伴签订了战略合作协议。
-
【重磅快讯】T11 2019数据智能技术峰会举办，AI将成为行业颠覆者
11月25日，T11 2019数据智能技术峰会在京举办。TalkingData正式宣布了2019年的最新战略布局，以数据平台为支撑，借助大数据技术积累与人工智能技术创新，聚焦不同行业场景需求，并在选址、预测、个性化推荐等方面进行深入应用，以数据和科技的力量驱动发展。
-
-
CSDN云计算「C课有道」栏目趁着这股技术风潮再次如期而至啦！秉承「门门有路，路路有门」的理念，这次CSDN云计算小分队特邀阿里云、腾讯云、青云、天云等企业内的“国宝级”架构师，共同打造了一款数据库系列进阶教程，效果绝堪比“红宝书”。 从数据库宏观发展入手，内容主要涉及云数据库为代表的非关系型数据库、MySQL数据处理、分布式等诸多技术要点，将造福开发者设置为终极指标，纯技术绽放的精彩无限，实在不容错过。
-
-
近日2019甲骨文云大会在上海举行。大会今年以“超越，由此开启”为主题，聚集了众多数字化领军企业代表，与合作伙伴、技术专家和意见领袖一起共同探讨技术创新将如何帮助企业探索数据价值，创造无限可能。
-
如果有人要问2019年技术圈什么最热，“中台”绝对当仁不让，从观望到试水，很多公司做出了从 0 到 1 的探索。众所周知，“中台”一词在国内最早是由阿里提出来的，2015 年，马云参观芬兰游戏公司Supercell，观察其每个游戏开发的小团队只有六七个人，但开发与停止的速度之快，让马云即惊讶又好奇。得知如此快的原因是开发者将游戏开发过程中用到的一些通用的游戏素材和算法整理出来，作为工具提供给小团队使用，使得同一套工具可以支持多个游戏研发团队。这样的架构模式给了马云很大的震撼和启发，这也催生了阿里巴巴的中台战略，加之越来越的企业跟随其热度，寄希望于借助中台推动业务增长以快速实现数字化转型， “中台”得以风靡。
-
腾讯Techo开发者大会揭晓云存储发展趋向：高性能、高可用、高性价比
产业数字化转型过程中产生着比过去任何一个时代都多的数据。在这样的背景下，数据存储技术应该怎么发展？11月7日，在腾讯Techo开发者大会上，来自科研领域的专家和腾讯云存储业务的工程师们共同揭开了云存储的发展趋势。
-
四大开源项目联合发布 腾讯已成Github全球贡献前十公司！
近日在Techo开发者大会上，腾讯正式对四大重点开源项目进行了联合发布，包括分布式消息中间件TubeMQ、基于最主流的 OpenJDK8开发的Tencent Kona JDK、分布式HTAP数据库 TBase，以及企业级容器平台TKEStack。
-
正式开源TKE和TBase，腾讯正成为大数据领域开源全面的厂商
在11月6日召开的Techo开发者大会上，腾讯云副总裁、腾讯数据平台部总经理蒋杰博士正式对外披露腾讯大数据平台10年技术演进历程。经过10年的积累，腾讯大数据平台的算力资源池目前已有超过20万台的规模，每天实时数据计算量超过30万亿条，并且随着资源管理平台核心TKE和分布式数据库TBase正式对外开源，腾讯正在成为大数据领域开源全面的公司。
-
AWS在中国区域放出了一款“重量级”容器服务，名为 AWS Fargate，光环新网运营的 AWS 中国（北京）区域和西云数据运营的 AWS 中国（宁夏）区域均提供该项服务。 据悉这是一款可以适用于 Amazon ECS的计算引擎，主要帮助企业在生产过程中运行容器、却无需部署或者管理服务器，换句话说就是专注设计和构建应用程序，而不用挂心太多基础设施的“那些事儿”。
2019-11-05
活动
-
2021-11-10
-
2021-03-09
-
2020-12-16
独家定制
-
-
3500人的专业安全团队与你同在
-
-
CSDN云计算在线公开课
-
-
IaaS市场高速增长，历久弥新
精品推荐
关于我们
关注「云计算」
转载 & 投稿：songhui@csdn.net
商务合作：zhangjing@csdn.net