• 安防云计算核心技术探讨

    这种方式能够处理的数据量,数据组合的程度,数据的类型等等都还处于较低的水平,无法应对海量数据和日益增长的需求。大规模计算技术的目的就是为了提供一种统一的数据处理平台,上面可以集成各种智能化算法和计算...
    文章 2017-07-03 1428浏览量
  • 智能运维(AIOps)中几处问题的解决方案与思路

    海量数据处理”这是一个宏大的命题,听上去让人一头雾水,但当你对“事件”或者需要处理的问题分类后,每一部分看上去就是一个可以解决的问题了。我们会在《智能运维》一书中详细介绍如何对海量“事件”进行分类和...
    文章 2018-08-16 3221浏览量
  • 时培昕:工业物联网和工业大数据助力企业实现智能制造...

    但是大家也都知道,工业应用本身开发的过程就是非常漫长的过程,也包括特性的迭代相对比较慢,包括架构都很落后,很多工业应用还在采用单块化的应用架构,它并不是可以支持海量数据、分布式、可拓展的这种架构,后期...
    文章 2017-10-02 1867浏览量
  • 软件设计师之数据库系统万字大总结(莽起来)下

    技术手段增减派生性冗余列增加冗余列重新组表分割表以牺牲空间和规范化为代价提高一些查询的速度8.5 大数据对海量数据处理的一些相关技术数据量大&xff0c;速度要快&xff0c;要有多样性&xff0c;要有一定的价值。传统数据...
    文章 2021-12-29 53浏览量
  • 带你读《智能制造之卓越设备管理与运维实践》之三:运...

    卓越设备资产管理与运维管理体系紧抓人员、技术、备件和数据四大资源,在全生命周期数据资源管理的基础上,构建设备技术管理平台,并支持多技能、专业化人员成长和备件精细化经济管理两个闭环,如图3-2所示。...
    文章 2019-11-08 1835浏览量
  • 这才是真正的物流大数据挖掘思路!

    想要从海量数据中分析获取到有价值的知识信息,首先要了解物流货运车辆轨迹数据的特征。数据海量性:物流车辆一般以10秒到30秒的间隔向数据中心发送当前位置信息,这些移动在全国各地路网中的物流车辆每天生成的北斗...
    文章 2017-08-01 1266浏览量
  • 云迁移-笔记

    海量数据离线分析(ODPS) 高并发实施查询(OTS) 应用迁移 迁移方式 阿里云官方迁移工具 快捷方便 需要公网 镜像导入 无需公网 自定义配置 镜像工具Packer 无需公网 步骤简单 模板配置复杂 存储迁移 OSS迁移方式 数据库...
    文章 2020-04-16 391浏览量
  • SDCC 2017·上海站震撼来袭,首批讲师和议题大公开

    本次分享主要介绍我们在海量数据和高并发双重挑战下,如何从架构上和实现上保证实时性,稳定性和性能。听众收益: 了解实时计算的系统构成和架构;打造高性能服务的经验分享;从多个层面提高系统可用性经验分享;...
    文章 2018-04-19 1213浏览量
  • 如何设计一个监控平台(上篇)

    在进行故障原因定位时&xff0c;可以通过故障区域筛选以及多维度关联分析找到关键事件来进行系统自主故障定位。当然&xff0c;如果可以结合AI技术&xff0c;不断训练对应的分析模型&xff0c;可以最终实现无需人工介入的故障定位...
    文章 2022-01-06 55浏览量
  • 让AIOps把你从繁复耗时的基础运维中解放出来

    故障原因日趋复杂,仅凭已有经验进行处理已然不可行,部分故障是已知问题,但因为牵涉面广暂时不做解决,需要周期性的进行重复处理。动态告警基线 传统的固定告警基线有很多缺陷,例如反复触发、恢复会产生大量告警...
    文章 2018-06-27 3003浏览量
  • AIOps智能监控在阿里巴巴故障管理工作中的成功实践

    而算法的背后,离不开海量数据的支持,GOC团队通过与阿里巴巴其他团队的业务合作得到海量的数据,将这些数据加以孵化来得到更多高质量的算法。在团队支持层面,GOC团队拥有专业的算法团队,监控中心运维团队,工程...
    文章 2018-06-26 7773浏览量
  • 达摩院2020十大科技趋势发布:科技浪潮新十年序幕开启...

    同时为了便于用户对日志进行处理,提供了各种支持流式消费的SDK,如各种语言的消费组,与 Spark,Flink,Storm 等各种流计算技术无缝对接的Connector,以便于用户根据自己的业务场景非常便捷的处理海量日志。...
    文章 2020-01-02 3359浏览量
  • 【全观测系列】Elasticsearch应用性能监控最佳实践

    海量数据存储成本高日志场景涉及海量数据&xff0c;TB级别起步&xff0c;甚至PB级&xff1b;日志分析和指标监控统一难借助时序系统可以很好的完成监控&xff0c;但异常分析困难相反&xff0c;如何在统一平台完成&xff1b;系统可扩展性...
    文章 2021-12-28 337浏览量
  • 《企业大数据系统构建实战:技术、架构、实施与应用》...

    针对常见的大数据工作,例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理海量数据SQL查询、数据可视化、商业智能、推荐引擎等,方案中的数据分析需求通过什么技术来实现,各自的优化点和增强点有哪些;...
    文章 2017-05-02 3434浏览量
  • 浅谈告警管理能力成熟度模型

    可以通过时间相关性、文本相似度、故障溯因图、CMDB(Configuration Management Database,配置管理数据库)等手段,对海量数据中相似、相关的告警进行聚合。针对告警中的异常、新奇等重要信息,通过时间熵和内容熵...
    文章 2019-08-14 1361浏览量
  • 轻松应对双11,百万级物理和虚拟网络设备的网络智能化...

    对可疑故障链路进行标红处理,通过庖丁可视化界面,轻松判断故障的发生原因。在故障发现、探测的最终结果可以对具体的用户呈现,也可以通过API形式对业务系统进行主动的信息推送。这意味着上层业务网络查询更加开放...
    文章 2017-12-14 1964浏览量
  • 好程序员大数据培训分享Apache-Hadoop简介

    因其在分布式环境下提供了高效的,海量数据的优秀处理能力,Hadoop被公认为大数据行业中的标准开源软件。几乎所有主流的厂商如谷歌,雅虎,微软,淘宝等等这样的大公司都是围绕Hadoop进行提供开发工具,开源软件,...
    文章 2020-05-29 1218浏览量
  • 带你读《企业数据湖》之三:Lambda架构:一种数据湖...

    该模式是一种概念:通过使用两个重要组件来处理海量数据,这两个组件分别是批处理层和快速处理层。Nathan把他的发现和经验概括为Lambda架构,该架构需要满足一些重要的架构设计原则,例如: 线性可扩展原则:它应该...
    文章 2019-10-20 3295浏览量
  • CIO指南:如何使用SAP HANA平台处理数据

    但是撇开这些批判,Lambda 架构仍然是一种有效的大数据处理技术。归根结底,关键就是要让 Lambda的要求更易于管理。 SAP HANA 可以帮助你从该平台的预集成组件(包括处理引擎和数据存储器),实施一款完整的 ...
    文章 2016-12-27 2673浏览量
  • 阿里双11网络技术揭秘:百万级物理和虚拟网络设备的...

    对可疑故障链路进行标红处理,通过庖丁可视化界面,轻松判断故障的发生原因。在故障发现、探测的最终结果可以对具体的用户呈现,也可以通过API形式对业务系统进行主动的信息推送。这意味着上层业务网络查询更加开放...
    文章 2018-01-05 5066浏览量
  • 《机器人操作系统ROS原理与应用》——3.2 如何选择...

    针对常见的大数据工作,例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理海量数据SQL查询、数据可视化、商业智能、推荐引擎等,方案中的数据分析需求通过什么技术来实现,各自的优化点和增强点有哪些;...
    文章 2017-05-02 1566浏览量
  • 带你读《企业数据湖》之二:数据湖概念概览

    该机制的一种常见实现策略是通过构建企业级数据湖来提供统一的企业数据模型,在该机制中,数据湖负责捕获数据处理数据、分析数据,以及为消费者系统提供数据服务。数据湖能从以下方面帮助到企业: 实现数据治理...
    文章 2019-10-19 1784浏览量
  • HBase毛刺消除利器-双集群并发访问(Dual Service)

    跨可用区同城主备保证云HBase集群全年99.99%的可用性,双集群并发访问(Dual Service)保障海量数据读查询99.9%50ms以内的极致稳定性,有了"双保险"但是我们还会遇到其他问题的挑战:单集群完全故障(断网、断电场景)使用...
    文章 2019-12-09 1281浏览量
  • 袋鼠云助力光伏产业|基于阿里云数加平台做算法预测

    而更重要的是:分析型数据库采用云计算技术,拥有强大的实时计算能力,通常可以在数百毫秒内完成十亿百亿的数据计算,使得使用者可以根据自己的想法在海量数据中进行自由探索,而不是根据预先设定好的逻辑查看已有的...
    文章 2017-04-10 3855浏览量
  • 如何防范人工智能、大数据、区块链、云计算的技术风险...

    大数据采用云端存储处理海量数据,对数据的管理较为分散,对用户进行数据处理的场所无法控制,难以区分合 法用户与非法用户,容易导致非法用户入侵,窃取重要信息,在网络空间,大数据更容易成为攻击目标。...
    文章 2017-08-01 1896浏览量
  • 物联网给IT带来了新的挑战:海量数据、复杂性和超动态...

    数据量已经达到历史新高,问题是谁应该分析这些海量数据?自从物联网时代开始以来,就不可能再手动监控IT运营。物联网将很快成为标准解决方案,因此您将必须自动进行可用性检查和监控。复杂性爆发 云技术和物联网...
    文章 2020-01-06 1065浏览量
  • 基础设施助力双11(十):百万级物理和虚拟网络设备的...

    对可疑故障链路进行标红处理,通过庖丁可视化界面,轻松判断故障的发生原因。在故障发现、探测的最终结果可以对具体的用户呈现,也可以通过API形式对业务系统进行主动的信息推送。这意味着上层业务网络查询更加开放...
    文章 2019-07-31 1164浏览量
  • AI与数据中心唇齿相依

    数据中心天然就是一个海量数据库&xff0c;每天生成的和转发的数据都在呈指数增长&xff0c;AI拥有了这些数据&xff0c;再根据算法&xff0c;才能计算出想要的结果或执行相应的控制指令。AI的算法依赖于数据中心提供的大量训练...
    文章 2021-12-29 47浏览量
  • 阿里如何做到百万量级硬件故障自愈?

    于是我们采用中心化架构进行了一次重构,但中心化架构又会遇到海量数据处理问题,单纯几个服务端根本处理不过来。因此我们对系统进一步进行分布式服务化的重构,以支撑海量业务场景,将架构中的各个模块进行拆解,...
    文章 2018-11-19 3229浏览量
  • 数据时代的五大商业分析技术趋势

    它们分别为:大数据的增长、快速处理技术、IT商品的成本下降、移动设备的普及和社交媒体的增长。1.大数据数据指非常庞大的数据集,尤其是那些没有被整齐的组织起来无法适应传统数据仓库的数据集。网络蜘蛛数据、...
    文章 2017-04-03 1061浏览量
1 2 3 4 ... 25 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
http://www.vxiaotou.com