阿里云 > 开发者平台 > H > 海量数据处理技术常见故障
相关搜索：
多传感器数据融合技术问题处理与维修 海量数据处理技术错误如何解决 图像处理技术故障原因 海量数据处理技术发生故障怎么办 软件无线电技术故障原因 图像数据处理设备故障原因

  • 海量冷数据存储关键技术

    这不仅为数据存储行业带来了巨大的市场空间，同时也对海量数据的存储、处理和管理能力提出了前所未有的挑战。海量冷数据存储面临诸多挑战 首先，面对快速增长的数据存储需求，成本是需研究的首要问题。如果只从物理...
    文章 2017-07-03 3723浏览量

  • 《Apache Flink 十大技术难点实战》发布，帮你从容...

    Apache Flink 作为业界公认为最好的流计算引擎，不仅仅局限于做流处理，而是一套兼具流、批、机器学习等多种计算功能的大数据引擎，以其高吞吐低延时的优异实时计算能力、支持海量数据的亚秒级快速响应帮助企业和...
    文章 2020-03-11 27323浏览量

  • 一张图帮你快速建立大数据知识体系

    相对应的是行式数据库，数据以行相关的存储体系架构进行空间分配，主要适合于大批量的数据处理，常用于联机事务型数据处理。目前业界比较流行的列存储数据库如下：Phoenix、Cassandra、Hbase、Kudu、Hypertable。...
    文章 2020-06-11 12929浏览量

  • 智能运维（AIOps）中几处问题的解决方案与思路

    “海量数据处理”这是一个宏大的命题，听上去让人一头雾水，但当你对“事件”或者需要处理的问题分类后，每一部分看上去就是一个可以解决的问题了。我们会在《智能运维》一书中详细介绍如何对海量“事件”进行分类和...
    文章 2018-08-16 3221浏览量

  • PolarDB-X高分通过中国信通院《分布式事务数据库稳定...

    阿里云PolarDB-X云原生分布式数据库在生产环境常见故障场景下核心业务的分布式事务性能、数据强一致等方面&xff0c;全部满足分布式事务性数据库稳定性测试要求&xff0c;率先高分通过了全部测试项目。PolarDB-X 是由阿里...
    文章 2021-06-28 980浏览量

  • 如何通过AI 全面提升运维效率？选型宝分享AIOps实战...

    通过分布式大数据处理、内存计算等技术，我们为该用户实现了10万条/秒的并发数据实时分析处理和秒级告警处理。通过深度学习、时序预测等算法的应用，使预测的准确率得到大幅提升，预测结果与实际情况的偏差仅有3%。...
    文章 2019-08-15 1615浏览量

  • 百度使用自主研发系统工具hdoctor 使SATA盘返修率低于...

    包括潜在故障扇区修复、文件系统坏块屏蔽、硬盘及阵列状态设置校正、硬盘状态未就绪或超时的处理、数据/硬件故障排除、盘符前后漂移复位等常见的运维故障处理。而在未使用hdoctor的情况下&xff0c;因业务稳定性要求&...
    文章 2021-11-10 50浏览量

  • 物联网在制造业的应用

    技术实现上遵循了物联网的数据传输流程，首先从传感器或可编程设备来收集数据（比如工厂的大型机械臂、传送带等），然后在传输之前进行预处理（数据筛选，打标签，日期格式标准化等等），再然后按照不同的协议进行...
    文章 2019-07-28 1469浏览量

  • 企业级系统架构设计技术与互联网应用技术结合主题一 ...

    何谓大规模并发，不同层面有不同的理解 企业应用（Intranet）：千级强并发，万级弱...Java相关开源技术比较常见 本文转自 www19 51CTO博客，原文链接：http://blog.51cto.com/doujh/1812497，如需转载请自行联系原作者
    文章 2017-11-27 1818浏览量

  • 从Hadoop框架与MapReduce模式中谈海量数据处理（含...

    本文从最基本的mapreduce模式，Hadoop框架开始谈起，然后由各自的架构引申开来，谈到海量数据处理，最后谈谈淘宝的海量数据产品技术架构，以为了兼备浅出与深入之效，最终，希望得到读者的喜欢与支持。谢谢。由于...
    文章 2014-09-08 1384浏览量

  • 从浪潮服务器NF8460M5 看企业级应用计算的进化

    然而，随着大数据技术的成熟和海量数据累计，传统的数据集中化和网络交换模式成为制约计算力发展的瓶颈。一方面是因为本地存储空间有限，扩容既在技术上难以实现，成本也过高；另一方面则是由于交换技术的发展跟不上...
    文章 2017-08-02 1561浏览量

  • 企业数仓如何处理？Flink来报到|开发者社区精选文章...

    本文深度解析“流批一体”在阿里核心数据场景首次落地的实践经验，回顾“流批一体”大数据处理技术的发展历程。gt;gt;点击阅读全文性能提升约 7 倍！Apache Flink 与 Apache Hive 的集成随着 Flink 在流式计算的应用...
    文章 2021-08-13 103浏览量

  • 数据中台建设方法论实践之技术选型

    它提供了一个分布式、支持多租户的全文搜索引擎，支持结构化检索和数据分析，能对对海量数据进行近实时的处理，它适用于给类似维基百科这样的知识网站提供全文检索和搜索推荐，给电商网站提供搜索商品信息的能力，对...
    文章 2020-03-09 1287浏览量

  • 专访 OceanBase 数据库创始人阳振坤...共建数据技术未来

    如今的海量数据处理系统，不论是大数据系统还是数据仓库，都是分布式——原生分布式。再回过头来看关系型数据库，尤其是 OLTP 数据库，目前仍然是以单机/集中式为主。不是 OLTP 数据库不需要做分布式，而是分布式的...
    文章 2021-01-07 330浏览量

  • IDC：曙光斩获2015年中国NAS网络存储上半年第一名

    曙光ParaStor并行存储系统汇集了曙光公司多年以来在并行计算和海量数据处理方面的丰富经验，从架构上彻底消除了传统存储系统的瓶颈，能够满足高带宽和高并发的海量文件存取的需求，将为用户带来前所未有的存储性能...
    文章 2017-08-09 1799浏览量

  • 主流大数据系统在后台的层次角色及数据流向

    第一，大数据存储解决了大数据技术中的首要问题，即海量数据首先要能保存下来，才能有后续的处理。因此大数据存储的重要性是毫无疑问的。第二，大数据统计是对海量数据的分析统计和轻度挖掘，例如统计海量用户产品的...
    文章 2017-08-01 1191浏览量

  • 阿里如何做到百万量级硬件故障自愈？

    于是我们采用中心化架构进行了一次重构，但中心化架构又会遇到海量数据的处理问题，单纯几个服务端根本处理不过来。因此我们对系统进一步进行分布式服务化的重构，以支撑海量业务场景，将架构中的各个模块进行拆解，...
    文章 2018-11-19 3229浏览量

  • 达摩院2020十大科技趋势发布：科技浪潮新十年序幕开启...

    同时为了便于用户对日志进行处理，提供了各种支持流式消费的SDK，如各种语言的消费组，与 Spark，Flink，Storm 等各种流计算技术无缝对接的Connector，以便于用户根据自己的业务场景非常便捷的处理海量日志。...
    文章 2020-01-02 3359浏览量

  • 《企业大数据系统构建实战：技术、架构、实施与应用》...

    针对常见的大数据工作，例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理、海量数据SQL查询、数据可视化、商业智能、推荐引擎等，方案中的数据分析需求通过什么技术来实现，各自的优化点和增强点有哪些；...
    文章 2017-05-02 3434浏览量

  • Elasticsearch 全观测技术解析与应用（三）:能力呈现...

    数据采集完成后，会进到Kafka这样的数据汇聚层，以经济高效的方式保证海量数据的涌入；随后在数据处理层，有Logstash等工具对数据进行加工、转换、清洗，变成结构化数据，然后交由Elasticsearch进行存储和提供搜索...
    文章 2020-12-17 1085浏览量

  • SDCC 2017·上海站震撼来袭，首批讲师和议题大公开

    本次分享主要介绍我们在海量数据和高并发双重挑战下，如何从架构上和实现上保证实时性，稳定性和性能。听众收益： 了解实时计算的系统构成和架构；打造高性能服务的经验分享；从多个层面提高系统可用性经验分享；...
    文章 2018-04-19 1213浏览量

  • 八年来我们到底经历了什么？——中间件专家带你“重走...

    实现技术变量的采集、分析、预测，数据分析驱动，自主决策处理，做到关键技术指标的预估错误系统做到自适应，弹性处理；在体验、成本和最大吞吐能力找到新的平衡点。其他： 中间件高可用架构团队是阿里稳定性保障的...
    文章 2017-08-04 7903浏览量

  • AIOps智能监控在阿里巴巴故障管理工作中的成功实践

    而算法的背后，离不开海量数据的支持，GOC团队通过与阿里巴巴其他团队的业务合作得到海量的数据，将这些数据加以孵化来得到更多高质量的算法。在团队支持层面，GOC团队拥有专业的算法团队，监控中心运维团队，工程...
    文章 2018-06-26 7773浏览量

  • 分布式系统架构技术分析（一）

    在单数据库模式下，ACID 模型能有效保障数据的完整性，但是在大规模分布式环境下，单库无法承载高并发和海量数据，所以数据会被通过垂直拆分或水平拆分到不同的 DB 中，一个业务往往会跨越多个数据库。在 JavaEE ...
    文章 2019-08-03 1520浏览量

  • 解密：金融级海量数据库OceanBase

    为什么OceanBase是海量数据库？OceanBase数据库是由阿里巴巴集团和蚂蚁金服集团自主研发的一款产品，其目标就是支持海量的数据的存储和计算。和传统的数据库相比，OceanBase所具备的可靠性、稳定性和性能对硬件设备...
    文章 2016-05-06 7348浏览量

  • 【盘点篇】从安全、稳定、高可用、高性能、智能等维度...

    2018年，经过十年的技术发展和进化，飞天分布式存储引擎正式升级为盘古 2.0，具有软硬加速、极致性能、智能运维、海量规模、坚若磐石、广谱适应等六大特点，为阿里巴巴集团、阿里云智能业务的稳定运行提供强大的技术...
    文章 2019-02-26 8270浏览量

  • Hadoop，Hadoop涉及到的一些常见概念（分布式与集群、...

    目前主流的大数据处理分布式架构之一&xff0c;Hadoop用于处理大规模数据。【分布式系统架构&xff0c;用于处理大数据】■使用Hadoop构建的应用程序可在分布于商用计算机群集&xff08;低成本&xff09;的大型数据集上运行。【低...
    文章 2022-05-01 32浏览量

  • 《机器人操作系统ROS原理与应用》——3.2　如何选择...

    针对常见的大数据工作，例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理、海量数据SQL查询、数据可视化、商业智能、推荐引擎等，方案中的数据分析需求通过什么技术来实现，各自的优化点和增强点有哪些；...
    文章 2017-05-02 1566浏览量

  • PHP 依赖镜像出问题后，阿里工程师的一顿“神操作“令...

    首期我们将聚焦系统类常见问题——性能抖动，阿里云高级技术专家江冉将分享多年故障排查心得体会与经典案例实战经验。完成学习，你就是明日技术大牛！视频地址：https://yq.aliyun.com/live/1037 2.【云吞铺子】性能...
    文章 2019-12-25 3528浏览量

  • 如何设计一个监控平台（上篇）

    基本覆盖了常见的机器、应用服务数据采集&xff0c;包括中间件等&xff0c;同时也可以根据自身的业务特性进行定制开发。三、CMDB在业务平台发展初期&xff0c;少量的的服务器以及运维人员也许就可以满足生产需要。但是随着...
    文章 2022-01-06 55浏览量
1 2 3 4 ... 20 >
写文章 提问题 去认证
在线学习 技能测试 视频直播

相关推荐

参与开发者用户调研得周边好礼

阿里巴巴镜像站改版升级上线啦！

云产品推荐

热门关键词

更多推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
售前咨询
95187转1
专业技术咨询
全方位产品解读
成熟解决方案
成功客户案例分享
支持与服务 公告 帮助文档 自助工具 新手学堂 在线客服 技术工单 我要建议 我要投诉 迁移与部署 运维与管理 优化与提升 服务案例 支持计划
账户管理 管理控制台 备案管理 域名控制台 账号管理 充值付款 线下汇款/电汇 合同申请 索取发票 合规性
快速入口 域名信息查询（WHOIS） 云产品快报 海外上云 客户案例 举报中心 信任中心 产品图标 产品学习路径 阿里云认证 贡献者榜单
资源和社区 开发者社区 开发者学院 公开课 问答 藏经阁 天池平台 阿里云创新中心 阿里云全球培训中心 在线学习 开放实验室 考试认证 高校合作 码上公益
关注阿里云 企业决策必读 企业决策必读 阿里云APP 阿里云APP 阿里云微信 阿里云微信 阿里云微博 阿里云微博 阿里云支持与服务 阿里云支持与服务
热门产品 用户热搜 企业场景 更多推荐
短信服务 云服务器ECS CDN RDS MySQL 版 SSL证书 云数据库 Redis 版 Web应用防火墙 全站加速 专有网络 VPC RDS SQL Server 版 智能语音交互 PolarDB MySQL版 文件存储 (NAS) Elasticsearch 共享带宽 交互式分析 智能对话机器人 企业物联网平台 数据管理 DMS 云原生数据湖分析 全球加速 GA 数据库专属集群 应用身份服务 容器服务 ACK 发票凭证识别 数据库备份DBS 混合云备份 HBR 弹性云桌面 实人认证 商标服务 表格存储 Tablestore 文字识别 智能媒体管理 IMM 消息队列 RabbitMQ 版 云数据库OceanBase 容器镜像服务 ACR 视图计算 VEC SSL证书 共享带宽 Quick BI 数据可视化分析 应用实时监控服务 ARMS
关于我们 法律声明及隐私权政策 廉正举报 联系我们 加入阿里云
阿里巴巴集团 淘宝网 天猫 聚划算 全球速卖通 阿里巴巴国际交易市场 1688 阿里妈妈 飞猪 阿里云计算 AliOS 阿里通信 万网 高德 UC 友盟 虾米 优酷 钉钉 支付宝 达摩院 阿里安全
? 2009-2022 Aliyun.com 版权所有 增值电信业务经营许可证： 浙B2-20080101
网安 网安浙公网安备 33010602009975号

热门产品

关注我们： 新浪微博 微信

售前咨询：95187转1

?2018 Aliyun All rights reserved

http://www.vxiaotou.com