51CTO首页
AI.x社区
博客
学堂
精品班
直播训练营
企业培训
鸿蒙开发者社区
WOT技术大会
AIGC创新中国行
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术2024年软考PMP项目管理软考资讯
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO题库小程序
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
账号设置 退出

大数据

8797内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 8797 条
Kyligence 发布全新 AI 解决方案，助力企业构建数智竞争力 原创
​在数字化转型的浪潮中，企业对于智能决策的需求日益增长。为满足这一需求，Kyligence基于多年服务金融、零售、制造、医药等行业领先客户的实践经验，推出了全新的企业级 AI 解决方案，在为企业提供准确、可靠、智能的 AI +指标平台一站式解决方案，助力企业构建数智竞争力。

2024-04-18 10:38:57

Kyligence智能决策指标平台
用户行为分析模型实践（四）—— 留存分析模型
本文详细介绍了留存分析模型的概念及基本原理，并阐述了其在产品中具体实现。针对在实际使用过程问题，探索了基于ClickHouse留存分析模型实践方案。

2024-04-18 08:30:00

留存分析模型数据分析
一文带您了解权重证据(WoE)与信息价值(IV)：数据分析的重要利器
WOE和IV是数据分析和建模中的重要工具，它们能够帮助我们发现特征与目标变量之间的关系，并指导我们做出更好的决策。通过深入理解这些技术的原理和应用，我们可以更好地优化模型，提高预测准确性，从而实现更好的业务结果。​

2024-04-17 08:46:17

数据分析工具WoE
物化视图在 MaxCompute 中的探索与实践
物化视图（Materialized View，以下简称 MV）是将查询结果预先计算并存储的一种特殊的物理表，当执行相关查询时，可以自动复用预计算结果，提高查询性能。物化视图作为一种查询加速器，在云计算和大数据时代有着广泛的用途。今天和大家分享物化视图在 MaxCompute 的实践。

2024-04-17 07:21:52

物化视图查询加速器数据仓库
第三代指标平台定义、能力与技术详解
今天分享的主题是第三代指标平台如何做“轻”数仓。传统数仓的应用层需要面向业务场景做大量的宽表和汇总表开发，今天我们来探讨是不是有新的解决思路。

2024-04-16 07:18:54

指标平台数仓数智化分析
蚂蚁数科入选IDC《数据要素全景研究》代表技术厂商
作为国内最早布局区块链、隐私计算等前沿技术的厂商之一，蚂蚁数科在数据要素领域持续深耕，围绕数据要素价值释放全流程，在数据安全、数据合规、数据流通与数据应用等环节，都推出了针对性的技术产品与解决方案，促进数据安全合规、高效流通，加速数据要素价值释放。

2024-04-12 20:29:31

蚂蚁数科数据要素数据应用
全生命周期数据收集与管理：实现可持续建筑的关键
今天，我们一起来聊聊在建筑全生命周期内进行数据采集和管理的重要性及应用。通过对设计、施工和运营阶段的数据收集和管理，可以实现建筑的可持续发展目标，提高效率、降低成本、优化设计和运营，并促进智能化建筑的发展。本文将重点探讨数据收集与管理的方法、技术和应用，以及在实践中的价值和挑战。

2024-04-12 10:11:29

数据收集数据管理建筑
数据如何影响产业数字化进程 译文
数据因行业不同而不同，这也影响着不同行业的数字化进程——在某个行业中有效的策略在另一个行业中却行不通。而信息的多样性和可用性如何影响不同领域的数字化转型过程呢？

2024-04-11 10:09:49

数字化转型
如何更有效地利用大数据优化智能建筑运营
尽管智能建筑数据利用面临一些挑战，但通过大数据技术的应用和持续优化管理策略，可以充分发挥数据的价值，实现智能建筑运营管理的更高水平……

2024-04-11 09:30:00

大数据物联网楼宇自控
构建数字化、脱碳能源未来：技术驱动的绿色转型
数字化、脱碳能源未来是实现可持续发展和保护地球家园的关键路径之一。利用人工智能、物联网、大数据等技术，我们可以提高能源利用效率，减少碳排放，为人类创造一个更加绿色、健康、可持续的未来。

2024-04-10 11:02:48

物联网大数据人工智能
又踩坑了！BigDecimal使用的五个坑！
由于计算机的资源是有限的，所以是没办法用二进制精确的表示 0.1，只能用「近似值」来表示，就是在有限的精度情况下，最大化接近 0.1 的二进制数，于是就会造成精度缺失的情况。

2024-04-10 08:39:56

BigDecimal浮点数二进制
指标平台加速零售数字化转型--Kyligence Zen 智能一站式指标平台
宗正老师是大数据资深技术布道师，本次聚焦零售行业，分享如何利用指标平台及相应的技术方法，加速零售的数字化转型。

2024-04-10 07:24:58

数字化转型指标平台数据驱动
肯睿Cloudera宣布新任大中华区副总裁
刘汨春担任肯睿Cloudera大中华区副总裁，大数据和大模型赋能中国企业加速数字化转型

2024-04-09 11:49:07

数据云AI
2024年治理革命：大数据和GenAI
2024年，在大数据和生成式人工智能（GenAI）融合的推动下，治理格局正在经历深刻的变革。这种革命性的结合正在重塑政府收集、分析和利用数据，以做出明智决策和应对复杂社会挑战的方式。

2024-04-09 10:58:11

大数据人工智能GenAI
大数据泄露！boAt 的750万客户记录在暗网上被曝光
这次泄露最初由《福布斯印度》报道，据报道包括用户的敏感个人身份信息(PII)，如姓名、地址、电话号码、电子邮件地址、客户ID等。

2024-04-08 11:28:14

大数据泄露安全专家网络安全
掌握数据：AI和嵌入式分析如何驱动业务成果
能够有效利用数据作为战略资产的组织将不可避免地建立竞争优势，并在长期内超越同行。然而，这是一把双刃剑。如果不优先考虑，劣质数据最终会让组织付出代价。70%难以信任其数据的专业人士声称数据质量是最大的问题。

2024-04-08 08:20:00

大数据
数据治理的六大核心准则，终于有人讲明白了
当然不同的企业的情况差距相对较大，数据治理的团队需要具体问题具体分析。在不同的阶段，不同的准则的作用是不一样的，这也需要数据治理团队灵活地掌握。当然基于这些准则并不能保证数据治理一定成功，所以需要科学的数据治理流程或者框架来尽可能提高数据治理的成功。

2024-04-08 00:00:01

数据治理核心准则团队
滴滴国际化出行场景指标体系建设
本文将介绍滴滴在国际化出行场景中对数据指标体系建设的最佳实践。指标建设解决方案重点从建立组织、建立流程、模型设计、指标工具和指标治理等 5 个维度阐述，基于当下的国际化业务场景实际，需要体系化地建立数据指标体系，从而有效解决以上痛点问题。

2024-04-02 07:56:41

数据指标数据分析
大数据如何改变商业世界
使用数据还可以使营销决策更加有效，因为营销团队不会依赖某人的直觉或不完整的调查来推动他们的决策。通过分析他们之前的营销工作、社交媒体和潜在消费者的习惯，他们可以更好地瞄准市场的特定部分并取得更好的结果

2024-04-02 07:00:00

大数据
Python 可视化：Plotly 库使用基础
当使用 Plotly 进行数据可视化时，我们可以通过以下示例展示多种绘图方法，每个示例都会有详细的注释和说明。

2024-04-01 11:53:42

PlotlyPython数据可视化
用户画像、用户分群、用户分层，到底有啥区别？
大量的用户指标与标签，形成了用户画像。用户画像是一个统称，通常一讲用户画像，大家都知道是在说用户的指标与标签问题。用户画像是数据服务业务的底座，有了用户画像才可以进一步地工作。

2024-03-29 11:39:57

用户画像用户分群用户分层
如何利用大数据分析来革新旅游业？
大数据正在革新旅游业，为企业提供宝贵的见解，以增强其服务和定价策略。

2024-03-29 11:16:35

大数据大数据分析
使用 Java 进行大数据分析公众号阅读量 10 万+ 文章标题的秘密
无论是Java编程技巧的分享，还是公众号的运营管理，都需要我们深入掌握一门技术或者一项业务的精髓，并辅以实践的锻炼和自我迭代的能力。

2024-03-28 08:10:37

Java技巧SEO
一篇讲明白 Hadoop 生态的三大部件
Spark 由 Twitter 公司开发并开源，解决了海量数据流式分析的问题。Spark 首先将数据 导入 Spark 集群，然后通过基于内存的管理方式对数据进行快速扫描，通过迭代算法实现 全局 I/O 操作的最小化，达到提升整体处理性能的目的。

2024-03-27 18:22:58

Hadoop部件生态
欧盟《数据法》将如何改变数据的使用和共享方式？
整体看来《数据法》似乎对美国科技巨头影响大一些，但对于中国出海企业而已同样具有挑战，尤其是《数据法》在国际数据传输方面的限制……

2024-03-27 15:31:34

大数据物联网人工智能
数据分析，如何实现降本增效？
隐形的羊毛更难受。比如很多公司做促销活动，总喜欢搞“全场大促”，心理感觉可以多覆盖用户，可实际上参与的都是同一批人。结果经常是有活动的产品销量大涨，没活动的一蹶不振，总业绩也不见涨。

2024-03-27 12:31:54

数据分析降本增效促销活动
Denodo数据编织研讨会召开，“逻辑数据编织之父”分享数据管理新趋势
2024年3月22日，由Denodo主办的数据编织研讨会在深圳召开。会议以“Fearless Data（无畏于数据）”为主题，与会嘉宾围绕行业趋势、核心技术及垂直行业应用等话题展开探讨，为AI浪潮下中国企业的数字化转型提供数据管理新范式。

2024-03-27 10:24:13

Denodo数据编织
绿色企业如何利用大数据？
当尝试创建绿色企业时，需要考虑很多事情。其中需要意识到的一件事是可持续性和技术的交集。提高绿色企业运营效率的方法之一是投资大数据。

2024-03-26 16:08:40

大数据绿色企业
大厂都要求的“数据分析闭环”，该如何实现？
完整的数据闭环，应该是：用数据监控业务 → 发现业务中的问题 → 分析问题原因 → 选择解决方案 → 继续监控业务走势，这样一条完整的链路。如果能实现闭环，肯定是做到了真正的数据驱动，既能体现数据分析的价值，又能促成业务科学办事，避免拍脑袋决策，是最好的状态了。

2024-03-26 11:37:08

数据分析业务
滴滴大数据资产治理实践
数据资产治理是大数据应用中的重要一环。有效的数据治理可以降本增效，提升数据利用效率。数据治理还需要平台化工具来辅助。本文将介绍滴滴出行在大数据资产治理方面的实践。

2024-03-26 06:46:52

大数据数据治理大数据资产治理
这是我见过最精准的预测模型
预测问题的背后，是一个很深层的业务问题：在很多公司，库存积压的损失是直观可见的，货都烂在货仓里。但缺货损失的潜在销量，却没有认真统计。想统计缺货损失很容易，可以让客户交定金预约，可以让客户登记需求量和需求时间。但很多公司业务要么懒，要么蠢，要么不想担责任，总之是没有做。

2024-03-26 00:54:42

预测模型数据
应对生成人工智能的挑战，数据治理要如何发展？ 译文 精选
生成式人工智能为组织如何获取和使用数据带来了新的风险、挑战和机遇。数据治理团队可以通过以下四种方式应对这一挑战。

2024-03-25 19:47:00

AIGC数据治理
八个常见的数据可视化错误以及如何避免它们
在当今以数据驱动为主导的世界里，清晰且具有洞察力的数据可视化至关重要。然而，在创建数据可视化时很容易犯错误，这可能导致对数据的错误解读。本文将探讨一些常见的糟糕数据可视化示例，并提供如何避免这些错误的建议。

2024-03-25 14:17:52

数据可视化数据驱动
大数据 AI 一体化解读
本文将从以数据为中心的模型开发、基础设施建设、数据分析应用等多个方面为您解读大数据 AI 一体化。在大数据和 AI 的推动下，近年来出现了一些非常令人欣喜的科技进展。

2024-03-25 08:15:02

数据分析AI 一体化大数据
人工智能技术在群聊类数据分析中的探索
随着互联网的快速发展，社交网络已经成为了现代人日常生活中不可或缺的一部分。其中，群聊作为一种集体交流的方式，承载了丰富多样的信息，从文字到语音，再到图片和视频，内容形式多样，且充满碎片化特性。

2024-03-22 14:56:43

人工智能数据分析
探讨大数据与供应链分析
大数据和供应链分析之间的合作具有巨大的潜力，可以彻底改变组织设计、管理和简化供应链的方式。本文深入探讨了与在供应链分析中利用大数据相关的关键概念、挑战、好处、应用和未来方向。

2024-03-22 09:56:48

供应链分析大数据
人工智能与数据分类和治理的重要作用
有些人对数据分类的含义感到困惑，毕竟，大多数存储的数据不是已经分类了吗?这可以更好地定义人工智能背景下的数据分类。数据分类涉及根据数据的性质、敏感性以及暴露或丢失的影响将数据分为不同类型。

2024-03-21 16:17:13

人工智能数据分类AI
现代数据堆栈需要彻底改革
现代数据堆栈已崩溃。从全球范围来看，平均每个组织使用130种不同的软件应用程序。由于有如此多的技术可用，数据管理很快就会变得复杂。

2024-03-21 15:54:00

数据堆栈数据管理数据结构
Ydata_profiling：自动生成数据探索报告的Python库
Ydata_profiling能够直接完成数据探索的工作，只需要几行代码，它会生成互动网页形式的报告，里面包含数据概览、字段分布、统计学特征、相关性、缺失值、样本信息等。

2024-03-20 08:37:34

数据处理Python数据分析
数据湖与数据仓库的区别
即使数据仓库和数据湖在大数据应用上有着许多共同的目标，但在处理方法、安全性、敏捷性、成本、架构、集成等方面存在一定的差异。

2024-03-19 13:45:27

数据仓库数据湖大数据
释放数据湖潜力：小红书如何实现数仓效率与成本的双重优化
为克服传统数据仓库在处理速度、灵活性和成本效率方面的局限，小红书数据仓库团队引入如 Apache Iceberg 等数据湖技术，将其与数仓架构相结合，以释放数据湖在查询性能、实时数据处理和成本效益方面的潜力。

2024-03-19 13:07:04

数据湖数据仓库
小红书离线数仓提效新思路，提升百倍回刷性能
现有以 Spark 为核心的数仓架构在处理大规模数据回刷方面已取得进展，但在资源和时间消耗上仍面临挑战。为了突破这些限制，小红书数据仓库团队将 StarRocks 融入到离线处理流程，替换掉部分 Spark 处理的任务，并优化较为耗时的 Cube 计算，大幅度提高了数据的执行效率。

2024-03-19 10:55:34

Spark
快手BI大数据分析场景性能优化实践
在信息化时代，大数据已经成为企业决策、市场分析、科研创新等众多领域的核心驱动力。随着数据规模的爆炸性增长，如何高效地处理和分析海量数据，实现性能的显著提升，成为各行各业迫切需要解决的关键问题。本文将为大家介绍快手大数据分析场景性能优化实践。

2024-03-19 09:24:00

大数据数据分析性能优化
大数据对银行战略的影响
在本文中，我们将深入研究大数据对银行战略的深刻影响，探索其含义、应用、挑战和未来前景。

2024-03-18 00:04:10

大数据银行
数据编排：性能是实现全球数据环境的关键
支持快速处理和来自不同存储孤岛的各种数据集的IT架构需要进行权衡。如今，非结构化数据编排汇集了来自多个供应商存储筒仓、地理位置的不同数据集和数据技术，而不会影响性能或安全的全球数据利用率。

2024-03-15 10:07:41

数据分析存储孤岛数据编排
流图计算在蚂蚁数仓加速场景的应用
数据仓库经过长时间的发展，技术体系已相对完善。传统数仓一般以表作为数据模型，来做数据建模以及数据的分析和处理。相比之下，图计算还是比较新的一门技术，主要是以图作为基本模型。本文将分享如何使用图计算以及图模型技术来解决传统数仓中的一些问题。

2024-03-15 07:21:33

数据仓库数据建模数据分析
数据分析师，定价模型怎么做？
现实的难点是：要怎么知道这个需求函数“Q=1000-4P”。本能的想法是：我先标个价格，比如100元，然后再降低到90、80、70、60……然后再提高到110、120、130、140，这样不就能测出来了？

2024-03-14 11:46:44

数据分析师定价模型
一个完整的数据分析体系，该长啥样？
在整个体系中，经营分析是直接服务于战略级决策的。在最高管理层做决策的时候，更聚焦于宏观的问题，比如整体目标达成，外部环境变化，内部举措效果。而不是陷在琐碎的业务细节里。

2024-03-13 13:46:44

数据分析体系
AI和大数据正在改变汽车行业的六种方式
从工厂车间到驾驶体验本身，人工智能和大数据正在推动更安全、更高效、更智能的汽车，以及更好的制造和维护流程。以下是人工智能和大数据重塑汽车版图的六种令人兴奋的方式。

2024-03-13 07:18:27

人工智能大数据汽车版图
超强，18 个必会的可视化技术
气泡图与散点图类似，但使用不同的气泡大小来表示附加维度。气泡图添加了一个视觉维度，可以根据销售量和比例来比较产品。

2024-03-13 00:00:01

可视化技术气泡图
1 23456 ··· 176
点赞

51CTO技术栈公众号

业务
速览
在线客服