• 数据的关键技术

    大数据环境下数据来源非常丰富且数据类型多样,存储和分析挖掘的数据量庞大,对数据展现的要求较高,并且很看重数据处理的高效性和可用性。传统数据处理方法的不足 传统的数据采集来源单一,且存储、管理和分析数据...
    文章 2015-03-05 1539浏览量
  • 阿里云数据库联合上海驻云助力DataFlux

    1、DataFlux 作为面向未来的实时数据分析和处理平台,需要满足客户高频、海量数据写入请求,同时还要满足用户灵活的多维度查询和关联分析,保证查询的效率2、DataFlux作为企业级产品,需要保数据一致性和数据安全...
    文章 2020-10-30 603浏览量
  • 岂止于大:大数据这个词已经过时了

    想想一下如果将上述所有技术结合在一起将能够创造出多么海量的新数据,不断进化的数据处理过程将迅速处理这些海量数据,直接用于指导行动,形成一个近乎于实时的决策影响系统。数据是一种原材料,它可以帮助各种商业...
    文章 2017-08-01 815浏览量
  • Do You Know ETL?

    ETL是数据的提取、转换和加载;...MapReduce的核心理念是,让许多机器一起来共同承担海量数据带来的处理压力,当数据的处理逻辑可以在不同的数据子集上独立进行时,使用MapReduce进行并处理可以先出提升处理速度。
    文章 2015-05-20 1170浏览量
  • GaussDB在IoT大数据场景的创新实践

    在数据爆炸式增长的时代,企业在进行海量数据分析与处理时面临四大挑战:l 极致的弹性扩缩容能力,满足海量数据处理需求l 系统具备极高的可用性,满足7 24 365间断持续运营诉求l 具备实时性分析能力,对服务体验、...
    文章 2021-11-06 52浏览量
  • 海量数据处理而生,阿里云发布SQL Server AlwaysOn...

    基于AlwaysOn技术的集群版则可以满足海量数据峰值处理的需求。在Gartner发布的2018全球数据库魔力象限中,阿里云数据库以国内市场份额第一的身份进入了远见者象限,这是中国科技企业首次进入该榜单。目前阿里云数据...
    文章 2018-11-23 1409浏览量
  • 为什么我们说海量数据处理技术会火

    为什么我们说海量数据处理技术会火 大数据处理技术正在改变目前计算机的运行模式。我们已经从中获得了大量收益,因为正是大数据处理技术给我们带来了搜索引擎Google。然而故事才刚刚开始,基于以下几个原因,我们说...
    文章 2013-06-03 975浏览量
  • 9月20-21日,十位阿里技术大牛带你玩转大流量与高并发

    MaxCompute是由阿里云自主研发的海量数据处理平台,可应用于数据分析、挖掘、商业智能等领域,提供了海量数据仓库的解决方案,并针对大数据的分析建模服务,支持了阿里和蚂蚁绝大多数计算分析任务。在“大流量高并发...
    文章 2016-09-02 6781浏览量
  • 双11当天处理数据5PB!揭秘HiStore数据

    “作为一款面向分析型应用领域的数据库产品,HiStore架构设计充分满足了海量数据查询和分析需求,以列为基本存储方式和数据运算对象,结合列数据压缩处理、并行处理、Snapshot并发控制、智能索引等数据处理技术,在...
    文章 2019-07-30 1475浏览量
  • 双11当天处理数据5PB—HiStore助力打造全球最大列存储...

    “作为一款面向分析型应用领域的数据库产品,HiStore架构设计充分满足了海量数据查询和分析需求,以列为基本存储方式和数据运算对象,结合列数据压缩处理、并行处理、Snapshot并发控制、智能索引等数据处理技术,在...
    文章 2016-12-19 3368浏览量
  • 双11当天处理数据5PB—HiStore助力打造全球最大列存储...

    “作为一款面向分析型应用领域的数据库产品,HiStore架构设计充分满足了海量数据查询和分析需求,以列为基本存储方式和数据运算对象,结合列数据压缩处理、并行处理、Snapshot并发控制、智能索引等数据处理技术,在...
    文章 2016-12-16 3247浏览量
  • 大数据与海量数据的区别

    海量数据处理:大数据的涌现已经催生出了设计用于数据密集型处理的架构,例如具有开放源码、在商品硬件群中运行的 Apache Hadoop。对于企业来说,难题在于以具备成本效益的方式快速可靠地从 Hadoop 中存取数据。定义...
    文章 2017-04-03 1767浏览量
  • 安防存储技术优势及在智能领域的应用

    智能分析产生海量的结构化数据、非结构化数据、半结构化数据等,海量数据必须拥有能够进行可靠、可保证效率且拥有快速的读写以及响应能力的存储,传统的集中存储式架构已无法满足智能分析所产生的数据的存储,云存储...
    文章 2017-08-09 857浏览量
  • 数据处理需要计算机云计算技术的配合

    数据技术跟计算机云计算技术的关系就像是一只手的手心和手背,是绝对的密可 分,因为分析和处理数据是无法用某一台计算机来完成的,它必须需要采用计算机的分布式架构,处理数据的特色就是在于对那些海量性...
    文章 2017-08-02 837浏览量
  • 安防云计算核心技术探讨

    这种方式能够处理的数据量,数据组合的程度,数据的类型等等都还处于较低的水平,无法应对海量数据和日益增长的需求。大规模计算技术的目的就是为了提供一种统一的数据处理平台,上面可以集成各种智能化算法和计算...
    文章 2017-07-03 1428浏览量
  • 东北大学破解大数据分析难题

    据介绍,大数据处理过程中的海量数据已远远超出了人们掌握和理解数据的能力。特别是异构数据,由于缺乏统一的格式与规范,在各部门和各软件系统中的流动与共享困难重重。针对这些难题,王国仁带领研究团队开展攻关,...
    文章 2017-07-04 1105浏览量
  • 基于OSS的EB级数据

    海量数据存储:面向海量数据存储设计,完全独立于计算框架之外,无需额外的挂载操作,数据可直接访问,具备极大的灵活性和弹性能力,足以应对数据爆炸式发展,同时支持多层冗余能力,实现数据高可靠与高可用 ...
    文章 2020-09-14 7438浏览量
  • 数据处理难 洞察与升值在眼前

    而Apache Hadoop则是一种专用于批处理的处理框架,是第一个在开源社区获得极大认可的大数据框架,基于谷歌有关海量数据处理的多篇论文与经验,Hadoop重新实现了相关算法和组件堆栈,简化了大规模批处理技术,提高了...
    文章 2017-07-03 1091浏览量
  • 基于Hadoop集群环境的数据采集和舆情监测技术分析,...

    数据处理可以通过MapReduce这一并行处理技术来提高数据的处理速度。MapReduce的设计初衷是通过大量廉价服务器实现大数据并行处理,对数据一致性要求高,其突出优势是具有扩展性和可用性,特别适用于海量的结构化...
    文章 2019-05-07 1362浏览量
  • 《Greenplum企业应用实战》一1.4 Greenplum特性及...

    (1)支持海量数据存储和处理当今是个数据迅速增长的时代,数据量从过去的MB到GB,再到TB增长到现在的PB级规模,传统的OLTP数据库在TB级别以上的数据管理中已经捉襟见肘。Greenplum使用MPP架构,同时使用多台机器...
    文章 2017-07-03 4193浏览量
  • 学术界关于HBase在物联网/车联网/互联网/金融/高能...

    针对海量数据中小文件读写效率低的情况,提出一种基于 HBase(Hadoop database)的海量小文件高效存储方法,利用 HBase 的存储优势,将小文件直接存储于 HBase,从而有效减少元数据节点服务器(Name-Node)的负载,...
    文章 2018-11-05 1450浏览量
  • 学术界关于HBase在物联网/车联网/互联网/金融/高能...

    针对海量数据中小文件读写效率低的情况,提出一种基于 HBase(Hadoop database)的海量小文件高效存储方法,利用 HBase 的存储优势,将小文件直接存储于 HBase,从而有效减少元数据节点服务器(Name-Node)的负载,...
    文章 2017-09-22 8357浏览量
  • 联想企业云盘高可用方案:为数据提供万无一失的保障

    对于企业用户来说,网盘高可用性能保障数据不丢失、服务中断以及数据恢复快,为企业的稳定运营奠定基础。首先,高可用系统可提供完整的数据,在任何情况下都能确保数据不丢失。当磁盘或节点出现故障时,可以通过...
    文章 2017-08-10 1173浏览量
  • 联想企业云盘高可用方案:为数据提供万无一失的保障

    对于企业用户来说,网盘高可用性能保障数据不丢失、服务中断以及数据恢复快,为企业的稳定运营奠定基础。首先,高可用系统可提供完整的数据,在任何情况下都能确保数据不丢失。当磁盘或节点出现故障时,可以通过...
    文章 2017-08-10 1024浏览量
  • 数据库必知词汇:Hadoop

    用户可以轻松地在Hadoop上开发和运行处理海量数据的应用程序。它主要有以下几个优点:1.高可靠性。Hadoop按位存储和处理数据的能力值得人们信赖。2.高扩展性。Hadoop是在可用的计算机集簇间分配数据并完成计算任务的...
    文章 2020-02-23 413浏览量
  • 分布式缓存那些事儿

    3)NoSQL 提供低延时的读写速度,支持水平扩展,这些特性对拥有海量数据访问请求的云平台而言是至关重要的.传统关系型数据无法提供同样的性能,而内存数据库容量有限且具备扩展能力.分布式缓存作为NoSQL 的一种重要...
    文章 2013-06-10 938浏览量
  • 浪潮分布式存储为广电总局打造健康新媒体监管平台

    AS13000的海量数据并行处理技术是为媒体行业量身打造的技术包,针对视频广电多媒体行业中的多路文件IO性能进行优化设计,可通过应用感知预读取算法智能识别多种文件格式,优化并发和大、小文件的处理能力,支持各种...
    文章 2017-08-02 1483浏览量
  • 云存储技术在安防监控系统中的运用

    另一类则是对结构化、半结构化信息的大数据分析处理工具,此类处理和分析工具是安防行业吸取IT行业在处理大数据方面的架构和经验,比较流行的如Hadoop,Spark大数据处理的框架,以及数据挖掘工具,以对结构化和半...
    文章 2017-08-10 1669浏览量
  • 【2019 云栖大会】对象存储海量数据管理和应用最佳...

    今年参加了 2019 云栖大会 下一代云存储技术与最佳实践专场,分享了“对象存储海量数据管理和应用最佳实践”议题,重点介绍对象存储 OSS 的架构原理、数据管理、最佳实践,现整理相关内容和大家探讨。一、企业数据...
    文章 2019-10-08 3659浏览量
  • 阿里云李飞飞:传统数据库步履蹒跚,未来的机会在哪里...

    随着近些年数据处理技术的不断发展,企业级应用对同时满足分布式水平拓展和一定程度上满足ACID保障有越来越强烈的需求,这就催生了 NewSQL 系统,简单来说就是把NoSQL系统和大数据处理技术与传统的面向结构化数据的...
    文章 2020-03-19 1694浏览量
1 2 3 4 ... 94 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
http://www.vxiaotou.com