• 《MapReduce 2.0源码分析与编程实战》一导读

    二是能够有效处理获得的海量数据,在限定时间内获得处理结果的处理程序。因此,寻求一个合理可靠的大数据处理决方案是目前数据处理的热点与重点。很多行业领导者把对大数据的处理看成互联网之后又一个能够获得竞争...
    文章 2017-05-02 1818浏览量
  • MaxCompute文章索引

    MaxCompute上如何处理非结构化数据 如何在MaxCompute上运行HadoopMR作业 使用 MaxCompute Studio 开发大数据应用 MaxCompute Studio提升UDF和MapReduce开发体验 Logstash+DataHub+MaxCompute/StreamCompute 进行实时...
    文章 2016-10-19 9851浏览量
  • 一张图帮你快速建立大数据知识体系

    对于大数据或者大规模的分布式系统来说,如何能够高效快速地进行海量数据处理非常关键,而采用合适的数据结构和算法对于达成此目标至关重要。二 数据采集 大数据的采集处于大数据生命周期的第一个环节,从数据采集...
    文章 2020-06-11 12929浏览量
  • 智慧城市建设的关键技术研究

    如何及时处理海量感知信息,是智慧城市发展面临的另一个技术瓶颈,随着智慧城市建设的深化,需要综合运用云计算等技术推进平台处理技术不断发展,解决海量数据的存储、归类、处理、检索需求才能打破这种局限。...
    文章 2017-07-06 1413浏览量
  • 《企业大数据系统构建实战:技术、架构、实施与应用》...

    针对常见的大数据工作,例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理海量数据SQL查询、数据可视化、商业智能、推荐引擎等,方案中的数据分析需求通过什么技术来实现,各自的优化点和增强点有哪些;...
    文章 2017-05-02 3434浏览量
  • 《机器人操作系统ROS原理与应用》——3.2 如何选择...

    针对常见的大数据工作,例如实时处理、交互性分析、数据挖掘、机器学习、离线批处理海量数据SQL查询、数据可视化、商业智能、推荐引擎等,方案中的数据分析需求通过什么技术来实现,各自的优化点和增强点有哪些;...
    文章 2017-05-02 1566浏览量
  • 蚂蚁金服服务注册中心数据分片和同步方案详解|...

    DataServer 总体架构:对 SOFARegistry 中支持海量数据的总体架构做一个简述,讲解数据分片和同步方案中所涉及到的关键技术点;DataServer 启动:讲解 DataServer 启动的服务,从而为接下来更直观地理解数据分片、...
    文章 2019-10-11 738浏览量
  • 阿里、百度、美团都在用的‘高并发系统设计’;...

    池化技术如何减少频繁创建数据库连接的性能损耗?数据库优化方案(一):查询请求增加时,如何做主从分离?数据库优化方案(二):写入数据量增加时,如何实现分库分表?发号器:如何保证分库分表后ID的全局唯一性?NOSQL...
    文章 2020-05-22 2238浏览量
  • 我的2017云栖之行

    技术如何运用到营销管理中 09:45-10:30 智能设计-DT时代的新设计 Innovision 谢宣松 阿里巴巴资深技术专家 双十一预计3亿以上图片 视觉和设计:设计工作组成 像素?状态空间 两条主线:数据问题、问题定义清楚解决...
    文章 2017-10-19 2670浏览量
  • 智能运维(AIOps)中几处问题的解决方案与思路

    海量数据处理”这是一个宏大的命题,听上去让人一头雾水,但当你对“事件”或者需要处理的问题分类后,每一部分上去就是一个可以解决的问题了。我们会在《智能运维》一书中详细介绍如何对海量“事件”进行分类和...
    文章 2018-08-16 3221浏览量
  • 社会化海量数据采集爬虫框架搭建

    随着BIG DATA大数据概念逐渐升温,如何搭建一个能够采集海量数据的架构体系摆在大家眼前。如何能够做到所见即所得的无阻拦式采集、如何快速把不规则页面结构化并存储、如何满足越来越多的数据采集还要在有限时间内...
    文章 2017-05-02 1399浏览量
  • 数据1

    二、大数据技术要解决的技术难题2.1、海量数据如何存储&xff1f;海量数据的存储问题也不是今天才有的&xff0c;很早以前就出现了&xff0c;一些行业或者部门因为历史的积累&xff0c;数据量也达到了一定的级别&xff0c;当一台电脑...
    文章 2022-04-23 21浏览量
  • 新浪微博技术分享:微博实时直播答题的百万高并发架构...

    《P2P技术如何将实时视频直播带宽降低75%?《近期大热的实时直播答题系统的实现思路与技术难点分享》 《七牛云技术分享:使用QUIC协议实现实时视频直播0卡顿!《实时视频直播客户端技术盘点:Native、HTML5、WebRTC...
    文章 2018-10-22 2561浏览量
  • 无需担心架构演变 入云的Teradata无处不在

    即将在Azure Marketplace上发布的Teradata数据库将提供全部功能及海量并行处理配置,可扩展至多达32个节点。适用Azure 的Teradata数据库预计将于2016年四季度在US Gov Iowa、US Gov Virginia和西印度洋地区及中国...
    文章 2017-08-09 1582浏览量
  • 数据库大会上看技术如何服务信息化

    如何提升海量数据库的查询性能;如何保证数据库的可用性及数据安全性?本主题将重点探讨在SQL Server数据库平台上综合解决以上几类问题的方法及实践。主讲人周卫国,吉林大学计算机科学与技术专业博士,2005~2008年...
    文章 2017-09-01 1580浏览量
  • 揭秘“撩”大数据的正确姿势:生动示例解说大数据“三...

    不过这还只是了解了海量数据怎么存储,那如何海量数据存储中,快速计算出我们想要的结果呢?面对海量数据的计算,谷歌再次创新,推出了 MapReduce 编程模型及实现。MapReduce 主要是采取分而治之的思想,通俗地讲...
    文章 2019-12-31 3455浏览量
  • 云端软化产品将成为安防平台的核心

    从平安城市到智慧城市,安防已经积累了大量的信息化资源,以视频监控为例,目前的主要问题已经变为海量数据如何看、如何查和如何高效利用,如何在海量数据中获取到所需要的资源。这就涉及到数据潜在用户的需求分析、...
    文章 2017-07-03 1543浏览量
  • 基于阿里云Serverless架构下函数计算的最新应用场景...

    海量数据:涉及到三方面的数据,客户数据、商家数据、平台骑手数据、位置信息、商品信息等。请求明显波峰波谷:派单系统在一天中的资源使用非常不均衡,波峰期,例如外卖,在中午和晚饭达到高峰,平时空闲。通过技术...
    文章 2018-01-22 8117浏览量
  • 数据调查:BigData迫使企业做出抉择

    而多格式数据、读写速度(读写速度是指数据从端点移动到处理器和存储的速度)以及海量数据是企业面临大数据处理急需解决的技术挑战。众所周知随着大容量数据(TB级、PB级甚至EB级)的出现,业务数据对IT系统带来了更大的...
    文章 2017-09-01 1387浏览量
  • 技术,不因物联网而生却是为物联网而来!

    数据处理能力云技术是利用集群技术解决单个计算机或者少量计算机无法完成的计算。物联网终端设备最基本的功能是产生数据,但终端数量庞大,产生数据速度也是持续不断的,因此只有云技术有这能力处理如此大量的数据。...
    文章 2018-02-09 1213浏览量
  • 从浪潮服务器NF8460M5 企业级应用计算的进化

    然而,随着大数据技术的成熟和海量数据累计,传统的数据集中化和网络交换模式成为制约计算力发展的瓶颈。一方面是因为本地存储空间有限,扩容既在技术上难以实现,成本也过高;另一方面则是由于交换技术的发展跟不上...
    文章 2017-08-02 1561浏览量
  • 天下武功唯快不破 云时代IT基建谋出路

    怀揣提供完整云计算、物联网行业平台海量数据解决方案的理想,致力于提供海量数据的高速、安全存储、交换和处理,形成企业私有云和行业云平台的具体存储解决方案的南京斯坦德通信股份有限公司正在云计算的道路上寻找...
    文章 2017-09-04 1976浏览量
  • [转]面向海量服务的设计原则和策略总结

    互联网服务的特点就是面向海量级的用户,面向海量级的用户如何提供稳定的服务呢?这里,对这几年的一些经验积累和平时接触的一些理念做一个总结。一、原则 1.Web服务的CAP原理 CAP指的是三个要素:一致性...
    文章 2017-11-12 1162浏览量
  • 阿里云高级技术专家空见:CDN的数据化之路

    一定离不开高质量的内容分发网络服务,就是我们常说的CDN,在10月13日云栖大会视频多媒体分论坛上,阿里云高级技术专家空见为大家讲解了CDN服务过程中,数据处理、安全监测、日志分析、智能分析是如何为CDN赋能的。...
    文章 2017-10-16 3486浏览量
  • MaxCompute问答整理之6月

    MaxCompute是由阿里人自主研发的海量数据处理平台,可以称它为计算引擎。它主要提供针对TB/PB级数据、实时性要求不高的分布式处理能力,主要服务于批量结构化数据的存储和计算。简单来说呢,就是数据要存到...
    文章 2019-07-15 1900浏览量
  • “开源”vs“商业”,差别到底有多大?...

    同样作为分布式数据分析类产品,分析型数据库MySQL版经过多年技术积累,在存储架构、优化器、执行引擎等多领域的创新性成果,可大幅提高海量数据的实时查询性能。测试中除分析型数据库MySQL版外,其余产品都进行部分...
    文章 2020-03-13 14585浏览量
  • MySQL智能运维与实践,关系型数据如何优雅应对云...

    来自腾讯的专家李海翔,将分析金融云分布式数据库的事务处理技术,在这个主题中,海翔将和大家分享腾讯的TDSQL是如何应对挑战、以技术推动互联网金融业务发展的。这是一场MySQL的技术盛会,传统数据如何优雅地...
    文章 2017-11-08 3457浏览量
  • 大数据处理与编程实践》一一1.2 大数据处理技术简介

    1.2 大数据处理技术简介 1.2.1 大数据的发展背景和研究意义近几年来,随着计算机和信息技术的迅猛发展和普及应用,行业应用系统的规模迅速扩大,行业应用所产生的数据呈爆炸性增长。动辄达到数百TB甚至数十至数百...
    文章 2017-07-04 3297浏览量
  • 零代码如何打造自己的实时监控预警系统

    Kibana让海量数据更容易理解。它操作简单,基于浏览器的用户界面可以快速创建仪表板(dashboard)实时显示Elasticsearch查询动态。Kibana可以非常方便地把来自Logstash、ES-Hadoop、Beats或第三方技术的数据整合到...
    文章 2017-09-11 1900浏览量
  • 阿里EB级大数据体系,如何做到秒级响应、高效赋能?

    阿里巴巴如何构建一个从底层的数据采集、处理,到挖掘算法、应用、产品服务的全链路、标准化的大数据体系,使得超过EB级别的海量数据能够高效融合,并以秒级的响应速度,服务并驱动阿里巴巴的业务和外部千万用户的...
    文章 2017-11-03 3588浏览量
1 2 3 4 ... 45 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
http://www.vxiaotou.com