• Sensors Data:初创公司构建数据分析平台

    桑文锋,前百度大数据部技术经理,从2008年底开始组建并带领团队,从零开始实现了百度用户日志的大数据平台,覆盖数据收集、传输、元数据管理、作业流调度、海量数据查询引擎、数据可视化等。目前创业在做一款针对...
    文章 2017-07-03 1206浏览量
  • 《企业大数据系统构建实战:技术、架构、实施与应用》...

    针对常见的大数据工作,例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理海量数据SQL查询、数据可视化、商业智能、推荐引擎等,方案中的数据分析需求通过什么技术来实现,各自的优化点和增强点有哪些;...
    文章 2017-05-02 3434浏览量
  • 助你所在团队走上大数据路途的六大规则

    由于“大数据”的热点集中和可以处理海量数据如大规模并行计算(massively parallel computing)、云计算、Hadoop和MapReduce。因此,Oracle、IBM、微软、SAP和其他大厂家目前共同在推动相关对话。但光谈技术解决不了...
    文章 2017-08-01 1384浏览量
  • 漫步云端 我国掀起大数据革新浪潮

    用户需要用云计算处理、分析大量分布的数据,这就要求云数据管理技术能够及时、高效地对海量数据进行管理和分析。云计算处理数据的不确定性、海量性使得有效数据管理技术开发刻不容缓。但是,传统的关系数据库SQL在...
    文章 2017-07-03 1615浏览量
  • 《机器人操作系统ROS原理与应用》——3.2 如何选择...

    针对常见的大数据工作,例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理海量数据SQL查询、数据可视化、商业智能、推荐引擎等,方案中的数据分析需求通过什么技术来实现,各自的优化点和增强点有哪些;...
    文章 2017-05-02 1566浏览量
  • 《大数据管理概论》一2.6 大数据融合的驱动枢纽

    对于海量性和高速性,主要解决的是它们带来的负面影响,对这两个因素的处理直接关系到大数据融合的性能和效率。海量性和高速性迫使传统的多项式时间算法不再适用,需要权衡精度与速度(效率),大致有4种解决思路:...
    文章 2017-05-02 1897浏览量
  • 【学习】粗懂大数据的基本概念,不涉及行业和具体技术

    正是这些公开的论文,使得以GFS、MapReduce、Bigtable为代表的一系列大数据处理技术被广泛了解并得到应用,同时还催生出以Hadoop为代表的一系列云计算开源工具。这些工具有些是完整的处理平台,有些则是专门针对特定的...
    文章 2017-11-09 1603浏览量
  • 仁人帮探索大数据技术

    他们是目前最重要的三大分布式计算系统,Hadoop常用于离线的复杂的大数据处理,Spark常用于离线的快速的大数据处理,而Storm常用于在线的实时的大数据处理。以及阿里云推出的数加,它也包括了大数据计算服务...
    文章 2017-10-10 4065浏览量
  • 智能运维(AIOps)中几处问题的解决方案与思路

    海量数据处理”这是一个宏大的命题,听上去让人一头雾水,但当你对“事件”或者需要处理的问题分类后,每一部分看上去就是一个可以解决的问题了。我们会在《智能运维》一书中详细介绍如何对海量“事件”进行分类和...
    文章 2018-08-16 3221浏览量
  • 智慧城市建设的关键技术研究

    如何及时处理海量感知信息,是智慧城市发展面临的另一个技术瓶颈,随着智慧城市建设的深化,需要综合运用云计算等技术推进平台处理技术不断发展,解决海量数据的存储、归类、处理、检索需求才能打破这种局限。...
    文章 2017-07-06 1413浏览量
  • 安防云计算核心技术探讨

    提供海量存储的同时,如何快速有效的定位多维度数据,挖掘出各类孤岛数据在多维度的潜在关联关系,一直是我们致力于解决的问题。云计算、大数据技术正在慢慢渗入安防行业,随着这些技术的发展成熟,将对安防行业...
    文章 2017-07-03 1428浏览量
  • 扫平日志分析路上障碍,实时海量日志加工实践直播培训

    从异常错误监控,到异常错误排查框架流程,通过实战覆盖数据加工各个阶段的错误排查手段,包括:初始化错误排查,读取错误,加工错误,输出错误等 成喆 8月29日 19:30-20:30 直播资料下载(待发布) 扫码观察直播:日志服务...
    文章 2019-08-06 2470浏览量
  • 阿里、百度、美团都在用的‘高并发系统设计’;...

    秒杀活动"、"抢红包"、"微博热搜"、"12306抢票"、"共享单车拉新"等都是高并发的典型业务场景,那么如何解决这些业务场景背后的难点问题呢?秒杀系统中,QPS达到10万/s时,如何定位并解决业务瓶颈?明星婚恋话题不断弓...
    文章 2020-05-22 2238浏览量
  • 带你读《企业数据湖》之三:Lambda架构:一种数据湖...

    该模式是一种概念:通过使用两个重要组件来处理海量数据,这两个组件分别是批处理层和快速处理层。Nathan把他的发现和经验概括为Lambda架构,该架构需要满足一些重要的架构设计原则,例如: 线性可扩展原则:它应该...
    文章 2019-10-20 3295浏览量
  • 开源大数据周刊-2018年08月03日 第95期

    如何解决AI的大数据困境?杨强提出联邦迁移学习 2018中国人工智能大会在深圳举行。会上,国际人工智能联合会(IJCAI)主席、AAAI/ACM/IEEE Fellow、香港科技大学教授杨强发表了题为《AI面临的挑战和迁移学习所带来的...
    文章 2018-08-03 1696浏览量
  • 2017年12月19-20日 阿里云 飞天/智能 云栖大会-北京...

    产品定位:通过提供海量数据即席分析、电子报表制作及拖拽式可视化分析能力,助力企业实现业务数据化,实现人人都是数据分析师。Quick BI核心能力 丰富的数据源接入 多样的数据源支持:MaxCompute、RDS、Mysql、...
    文章 2017-12-21 2954浏览量
  • 数据时代的五大商业分析技术趋势

    例如,随着越来越多的公司开始不得不面对海量数据以及考虑如何利用这些数据,管理与分析大型不同数据集的技术开始出现。提前分析成本与性能趋势意味着公司能够提出比以前更为复杂的问题,提供更为有用的信息以 帮助...
    文章 2017-04-03 1061浏览量
  • 日志服务数据加工培训直播资料汇总:扫平日志分析路上...

    分享介绍日志服务数据...从异常错误监控,到异常错误排查框架流程,通过实战覆盖数据加工各个阶段的错误排查手段,包括:初始化错误排查,读取错误,加工错误,输出错误等视频回顾:https://yq.aliyun.com/live/1350PPT下载:...
    文章 2019-08-29 1415浏览量
  • 详细解读你所不了解的“大数据

    信息技术领域原先已经有“海量数据”、“大规模数据”等概念,但这些概念只着眼于数据规模本身,未能充分反映数据爆发背景下的数据处理与应用需求,而“大数据”这一新概念不仅指规模庞大的数据对象,也包含对这些...
    文章 2017-07-04 1694浏览量
  • 数据时代已经到来,你了解吗?

    信息技术领域原先已经有“海量数据”、“大规模数据”等概念,但这些概念只着眼于数据规模本身,未能充分反映数据爆发背景下的数据处理与应用需求,而“大数据”这一新概念不仅指规模庞大的数据对象,也包含对这些...
    文章 2017-08-01 1650浏览量
  • 世界杯直播背后的实时日志分析

    实时处理:在秒级别对海量数据进行实多维度聚合统计分析 表格存储:实时统计后的各类监控指标 对象存储:日志打包压缩,供用户离线下载 数据仓库:数据离线分析、用户行为分析、物业报表等场景 日志系统涉及的平台 从...
    文章 2018-09-09 1948浏览量
  • 一个系统,搞定闲鱼服务端复杂问题告警-定位-快速处理

    SLS 是阿里云研发针对日志类数据的一站式服务,其生命周期管理(TTL)以及极低的存储成本可以很好的解决海量数据带来的成本问题。实时计算 实时计算以数据采集的输出作为输入,负责对数据进行一轮预处理,包括链路数据...
    文章 2019-08-29 3072浏览量
  • 干货!处理数据技术大盘点

    作为应对这些问题的措施,分布式和并行处理技术不仅为在一段时间内处理大量数据提供了具体解决方案,还提供了处理延迟的方案。通过分布式计算的大数据处理流程如图1-1-2所示。正如你在图1-1-2中看到的那样,节点是...
    文章 2018-11-21 10719浏览量
  • 五大商业分析技术趋势与使用方式

    例如,随着越来越多的公司开始不得不面对海量数据以及考虑如何利用这些数据,管理与分析大型不同数据集的技术开始出现。提前分析成本与性能趋势意味着公司能够提出比以前更为复杂的问题,提供更为有用的信息以帮助...
    文章 2017-09-07 1286浏览量
  • 如何避免大数据分析项目的失败

    那么在大数据分析项目中成功与失败的区别就在于你如何处理数据分析的技术问题和挑战。你可以做以下几点来确保大数据分析项目的成功。1谨慎选择你使用的大数据分析工具许多技术上的失败都源于这样一个事实&xff0c;即...
    文章 2021-12-29 61浏览量
  • 带你读《企业数据湖》之二:数据湖概念概览

    该机制的一种常见实现策略是通过构建企业级数据湖来提供统一的企业数据模型,在该机制中,数据湖负责捕获数据处理数据、分析数据,以及为消费者系统提供数据服务。数据湖能从以下方面帮助到企业: 实现数据治理...
    文章 2019-10-19 1784浏览量
  • 《Hadoop与大数据挖掘》一导读

    早在2012年,大数据(big data)一词已经被广泛提起,人们用它来描述和定义信息爆炸时代产生的海量数据,并命名与之相关的技术发展与创新。那时就有人预计,从2013年至2020年,全球数据规模将增长10倍,每年产生的...
    文章 2017-06-26 3364浏览量
  • 数据是啥,可以吃的吗?

    大数据技术提供了高端快速的尖端技术,使得大数据处理技术能够日行千里。但是如果不选择正确有效的方向,反而累加为错误支付的成本。在大数据时代,一个正确的方向,正确的提问,正确的思路,比高精尖的科学技术、...
    文章 2019-07-23 799浏览量
  • 菜鸟+Hologres=智能物流

    2.更快的全链路处理速度(2亿记录端到端3分钟)全量数据处理所需的时间是非常重要的指标,设想某一天新发布的数据处理代码有bug,新产出的数据不可用,即使修复了代码,还得继续解决已经存在的错误数据,此时就要跑...
    文章 2020-08-10 10880浏览量
  • 数据技术在商业银行中的应用:场景、优势与对策

    伴随着互联网产业的崛起,这种创新的海量数据处理技术在电子商务、定向广告、智能推荐、社交网络等方面得到应用,取得巨大的商业成功。这启发全社会开始重新审视数据的巨大价值,金融、电信等拥有大量数据的行业也...
    文章 2017-07-04 1533浏览量
1 2 3 4 ... 35 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
http://www.vxiaotou.com