-
数据科学家应对的几大挑战及解决方法
所属栏目:[大数据] 日期:2022-07-21 热度:72
每天,全球各地的组织都在寻找2.5万亿字节的数据,以获得对其业务的见解和价值驱动的行动。为了实现这一目标,需要高技能的科学专家或数据科学家参与开发业务中的企业AI。在不断增长的业务领域中,数据科学家的每一个行动都有助于改进业务的功能。 下面来[详细]
-
终于有人把MPP大数据系统架构讲清楚了
所属栏目:[大数据] 日期:2022-07-21 热度:171
本文首先回顾并行硬件架构的发展,并进一步介绍基于并行硬件架构的数据库一体机系统与基于MPP架构的数据库软件系统。数据库一体机系统在银行等大型企业中采用广泛,一体机的优点是开箱即用、功能丰富、稳定、售后服务好,缺点是价格昂贵、扩展不灵活。基于[详细]
-
为何很多人宁可用 Excel 也不用 Python
所属栏目:[大数据] 日期:2022-07-21 热度:152
有人说,Python即使不是最好的编程语言,也是最受欢迎的语言之一。因为它简洁易用,功能强大,对初学者也很友好。在众多培训机构的小广告中,学了Python就能批量处理Excel表格,Python是实现办公自动化的利器,从此告别996之类的口号随处可见。但实际工作[详细]
-
云数据仓库中的数据安全思虑
所属栏目:[大数据] 日期:2022-07-21 热度:134
近年来,由于云计算与云存储具有一定的廉价性和可扩展性,云数据仓库(Cloud data warehouses,CDW)得到了广泛的应用并飞速发展。同时,CDW不但能够存储比本地数据库更多的数据,而且可以通过现代化数据管道,简化了ETL的各种流程,因此许多企业都开始用[详细]
-
几款日常的开源无代码测试工具
所属栏目:[大数据] 日期:2022-07-21 热度:176
编程语言一直是自动化测试、自动化测试人员、框架甚至工作职责中不可或缺的一部分。如果一个遗留项目已经使用了Java进行测试,该公司会为该项目寻找具备Java专业知识的人员。同样,如果新项目需要从零开始构建测试流程,那么首要考虑的事情就是团队擅长哪[详细]
-
详解元宇宙的七层产业链
所属栏目:[大数据] 日期:2022-07-15 热度:191
详解元宇宙的七层产业链: 1. 体验层映射现实世界的生活场景 元宇宙中的体验并不是打造简单的立体空间中的沉浸感,它可以把人类生活场景的方方面面映射进数字世界。当物理世界数字化之后,体验可以变得更加丰富。元宇宙可以帮助人类拓展边界,在虚拟世界中[详细]
-
具备可视化的数据不仅可以节流 还可以开源
所属栏目:[大数据] 日期:2022-07-15 热度:111
当数据团队在谈论具备可视化的数据和数据质量高的好处时,通常只会涉及数据不完整带来的负面影响:决策不力、收入流失,甚至降低客户的信任度。 Gartner预测,糟糕的数据质量使企业每年损失1290万美元,因此具备可视化的数据成为非常重要的选择。 如果公司[详细]
-
使用替代数据的五个隐性成本
所属栏目:[大数据] 日期:2022-07-15 热度:144
如今,替代数据源已嵌入到各个行业的企业业务流程中。根据Lowenstein Sandler 律师事务所2022 年的一项调查,92% 的投资机构(从对冲基金、私募股权到风险投资)都在以中等或很大的程度使用替代数据来为决策提供依据。受访者还预计,他们在 2022 年对替代数[详细]
-
2022年优秀预测分析工具和软件
所属栏目:[大数据] 日期:2022-07-15 热度:173
数据管理一直是企业面临的挑战。随着新的数据源不断涌入,使用合适的工具比以往任何时候都更为关键。预测分析工具和软件是完成这项任务的最佳解决方案。数据专家和商业管理者必须能够组织和清理数据,以启动这一进程。随后是对数据进行分析,并与同事分享[详细]
-
挖掘互联网开放数据可带来巨大商业价值
所属栏目:[大数据] 日期:2022-07-15 热度:156
星巴克的门店选址方法 20世纪80年代末,美国星巴克公司董事会名誉主席霍华德舒尔茨(Howard Schultz)曾经在西雅图总部组建地产团队,专门研究咖啡门店的选址。 他们除了有着专业的地产团队外,还有地理信息系统进行数据化分析,从而决定开店位置和营销方式[详细]
-
技术迷途者指南 我有问题 你有解吗
所属栏目:[大数据] 日期:2022-07-14 热度:51
在日常工作中,我们可能会遇到各种技术问题,比如运维、开发、框架、操作系统等领域,不同的技术人,碰到的难题也不尽相同。为了帮助大家更好的解决问题,51CTO技术交流群针对一些技术问题展开了深入的讨论交流。51CTO对其中精彩问答进行了整理,并通过文[详细]
-
区块链为大数据分析提供机会
所属栏目:[大数据] 日期:2022-07-14 热度:52
大数据能够获得实践应用并被各行各业青睐,最重要的原因还是大数据分析得出的结论具有指导意义,能够为行业决策提供数据统计基[详细]
-
大数据依赖不可取
所属栏目:[大数据] 日期:2022-07-13 热度:96
当下没有人会忽视大数据的重要作用。在生活的一切方面,大数据都潜在地发生着作用,特别是在管理层面,大数据已经成为重要的辅助工具。站在当前的角度来看,没有大数据,经济社会管理工作几乎就没有办法正常进行。 对传统统计数据的依靠和对现代大数据的依[详细]
-
用Elastic Block Store EBS 改善性能和数据可用性
所属栏目:[大数据] 日期:2022-07-13 热度:168
如今,许多数据库即服务(DBaaS)解决方案将计算层和存储层分开来,比如包括Amazon Aurora和Google BigQuery。由于数据存储和数据复制可以由现有服务来处理,DBaaS无需担心这种复杂性,这种解决方案很有吸引力。然而,这种设计的性能有时可能不如传统方式[详细]
-
Kafka 万亿级消息实践之资源组流量掉零故障排查分析
所属栏目:[大数据] 日期:2022-07-13 热度:73
Kafka 万亿级消息实践之资源组流量掉零故障排查分析: 一、Kafka 集群部署架构 为了让读者能与小编在后续的问题分析中有更好的共鸣,小编先与各位读者朋友对齐一下我们 Kafka 集群的部署架构及服务接入 Kafka 集群的流程。 为了避免超大集群我们按照业务维[详细]
-
如何使云原生运维化繁为简
所属栏目:[大数据] 日期:2022-06-17 热度:129
云计算带来了集约化、效率、弹性与业务敏捷的同时,对云上运维提出了前所未有的挑战。如何面对新技术趋势的挑战,构建面向云时代的智能监测平台,让云上应用获得更好的保障,是如今摆在每一个企业面前的一道难题。 在日前的【TTalk】系列活动第八期中,51C[详细]
-
如何借助Python创建机器学习模型
所属栏目:[大数据] 日期:2022-06-17 热度:98
你是否会遇到这样的场景,当你训练了一个新模型,有时你不想费心编写 Flask Code(Python的web 框架)或者将模型容器化并在 Docker 中运行它,就想通过 API 立即使用这个模型? 如果你有这个需求,你肯定想了解MLServer。它是一个基于Python的推理服务器,[详细]
-
转向未来的AI自动化测试工具
所属栏目:[大数据] 日期:2022-06-17 热度:141
近年来,自动化测试已经发生了重大的迭代。它在很大程度上协助QA团队减少了人为错误的可能。虽然目前有许多工具可以被用于自动化测试,但合适的工具一直是自动化测试成败与否的关键。同时,随着人工智能、机器学习和神经网络在各个领域的广泛运用,面向人[详细]
-
微型机器学习有望让深度学习嵌入微处理器
所属栏目:[大数据] 日期:2022-06-17 热度:159
深度学习模型最初的成功归功于拥有大量内存和GPU集群的大型服务器。深度学习的前景催生了一个为深度神经网络提供云计算服务的行业。因此,在几乎无限的云资源上运行的大型神经网络变得非常流行,这对于具有充足预算的科技公司尤其如此。 但与此同时,近年[详细]
-
人工智能平台计划中的质量工程设计
所属栏目:[大数据] 日期:2022-06-17 热度:200
我们正处在人工智能的黄金时代。人工智能方案的采用使得企业更具创造性、竞争力和快速响应能力。软件即服务(software-as-a-service,SaaS)模式,加上云技术的进步,使软件生产和消费过程越来越成熟。 普遍存在的一个事实是,大多数组织更喜欢购买现成的[详细]
-
开启元宇宙的数字人之行
所属栏目:[大数据] 日期:2022-06-17 热度:63
作为构建元宇宙内容的基石,数字人是最早可落地且可持续发展的元宇宙细分成熟场景,目前,虚拟偶像、电商带货、电视主持、虚拟主播等商业应用已被大众认可。在元宇宙世界中,最核心的内容之一非数字人莫属,因为数字人不光是真实世界人类在元宇宙中的化身[详细]
-
使用机器学习重塑视频中的人脸
所属栏目:[大数据] 日期:2022-06-17 热度:195
来自于中、英两国的一项合作研究设计出了一种在视频中重塑面孔的新方法。该技术可以扩大和缩小面部结构,同时还具有高度一致性,并且没有人工修剪的痕迹 一般而言,这种面部结构的转化通过传统的 CGI 方法来实现,而传统的 CGI 方法依托详细且昂贵的运动封[详细]
-
由于智能数据库的自助式机器学习
所属栏目:[大数据] 日期:2022-06-17 热度:182
由于智能数据库的自助式机器学习 1.如何成为一个IDO? IDO(insight-driven organization)指洞察力驱动(以信息为导向)的组织。要成为一个IDO,首先需要数据以及操作和分析数据的工具;其次是具有适当经验的数据分析师或数据科学家;最后还需要找到一种技术或者[详细]
-
元宇宙在艺术领域的探索
所属栏目:[大数据] 日期:2022-06-17 热度:193
在元宇宙概念火爆的当下,各行业均开始了在这片富地中的探索。而在诸多行业之中,艺术行业与元宇宙的融合互促效果尤为明显。在不久前MetaCon元宇宙技术大会上,触角科技有限公司联合创始人、大有不言文化有限公司创始人谷强为我们带来了《元宇宙在艺术行业[详细]
-
美团图神经网络训练架构的实践和探索
所属栏目:[大数据] 日期:2022-06-17 热度:166
美团搜索与NLP团队在图神经网络的长期落地实践中,基于业务实际场景,自主设计研发了图神经网络框架Tulong,以及配套的图学习平台,提升了模型的规模和迭代效率。 1. 前言 万物之间皆有联系。图作为一种通用的数据结构,可以很好地描述实体与实体之间的关[详细]
