• 【大数据学习】数据化运营并不难?关键是这些技术你...

    DataHub 有些类似有Kafuka,是一个海量数据的订阅和消费服务。DataHub中的数据订阅是基于Topic的。流数据应用场景,数据大屏。网站的访问数据是实时变化的,看起来非常炫酷。阿里双十一的实时大屏就是流数据结合数据...
    文章 2017-01-22 7368浏览量
  • 数据,可以吃的吗?

    大数据技术提供了高端快速的尖端技术,使得大数据处理技术能够日行千里。但是如果不选择正确有效的方向,反而累加为错误支付的成本。在大数据时代,一个正确的方向,正确的提问,正确的思路,比高精尖的科学技术、...
    文章 2019-07-23 799浏览量
  • 5W1H(六何分析法)全景洞察大数据

    排除其他的考虑,从技术来讲就是淘宝可以支持海量数据的在线服务的能力。典型的场景就是历史账单的查询: 分析完成后或者用户直接产生的数据存储在Hbase中 通过业务系统直接查询Hbase,提供给用户使用 ad-hot数据...
    文章 2018-11-05 2228浏览量
  • 5W1H(六何分析法)全景洞察大数据

    排除其他的考虑,从技术来讲就是淘宝可以支持海量数据的在线服务的能力。典型的场景就是历史账单的查询: 分析完成后或者用户直接产生的数据存储在Hbase中 通过业务系统直接查询Hbase,提供给用户使用 ad-hot数据...
    文章 2016-06-30 10268浏览量
  • 一场IT民工 与 人贩子 之间的战争-感受来自PostgreSQL...

    此时流式处理技术就派上用场啦,比如我们已经锁定了嫌疑人的范围,从技术角度来看,就是从实时产生的海量的信息中将嫌疑人的信息过滤出来,或者当遇到嫌疑人的信息时,即时的触发通知,告诉公安GG。流计算的用法很多...
    文章 2016-12-22 10044浏览量
  • ET悄然来袭,揭秘阿里云如何玩转人工智能

    那他们每天的工作都是干啥?难道真的如传说中的是在打造大数据智能机器人?实际上,他们正在努力积极的探索人工智能在各行业中的应用,通过利用阿里云强大的计算平台加上顶级专业的算法与行业数据有机的融合,不断的...
    文章 2016-08-16 5881浏览量
  • 数据治理那点事”系列之一:那些年我们一起踩过的坑

    数据成为社会和组织的宝贵资产,像工业时代的石油和电力一样驱动万物,然而如果石油的杂质太多,电流的电压不稳,数据的价值岂不是大打折扣,甚至根本不可用不敢,因此,数据治理是大数据时代我们海量数据的...
    文章 2019-07-24 1201浏览量
  • [干货]手把手带你了解实时看板(50PPT)

    现时在用的关键技术:1)数据联合、复制、同步、消息总线、微批量;2)为高效而设计的功能,包括变化数据捕获、列式数据库、内存中处理、固态硬盘;3)真正的实时处理,使用复杂事件处理和连续的流数据挖掘。从方法...
    文章 2017-05-02 1814浏览量
  • 电商平台实战经验:电商中的Hadoop生态系统应用

    海量数据表,进行预分区,Rowkey在Region上均匀分布 小量数据表,Rowkey按数据使用维度进行组织,方便查询 多列簇会导致HBase性能下降,故列簇数量不超过3个 封装HBase操作,将HBase原生接口封装为简单的对于Java...
    文章 2016-07-28 4013浏览量
  • 360要上A股IPO?先看看它的网络安全武器库

    但是在中国,真正有上亿用户、有上万台服务器运维能力、有大规模并发计算能力、有海量数据存储和实时处理能力的大数据公司,其实是屈指可数的,360就是其中一家。大数据可以简单分为用户端和服务端,用户端显而易见...
    文章 2017-07-05 1666浏览量
  • 讲真:序列化必读

    这些年随着云技术发展,对海量数据传输、存储和安全就变的越来越重要,RFC解决的是公有问题,序列化解决的就是私有问题。多年前项目实施中需要跨设备数据传输,Y哥打算把结构体强制类型转换以后扔过来,为这事跟他PK...
    文章 2018-08-03 1639浏览量
  • 全球敏捷运维峰会丨Gdevops北京站,不一样的端午等你...

    如何这个框架完成数据库分库分表、性能统计、SQL监控,以及Redis等缓存集成?此议题将逐一揭晓。58数据库冗余表架构设计实践 58同城这种分类信息网站的数据量之大自然是不在话下,通过可用性、读性能、一致性、...
    文章 2018-05-24 2221浏览量
  • 数据分析≠数据分析师

    做不了,你可以解决场景、可以解决技术和算法,但个人很难解决数据的问题,海量数据需要人工进行标注的,财力物力上你做不起 云计算呢?光服务器、宽带、数据中心的建设成本都是一个人难以承受的 大数据呢?也不是,...
    文章 2020-01-02 1638浏览量
  • 野路子土鳖ASP.NETer谈互联网的发展趋势

    微软不就是以消灭企业成本为己任,推出了silverlight,虽然这几年基本放弃,不过可以看出微软对web技术发展的判断是有远见的,当时我还郁闷,这玩意干啥用的。可见下一步web技术的发展将会在图形处理方面,有很大的...
    文章 2014-02-14 1005浏览量
  • 人工智能八大行业创新应用,开启智慧之路

    那他们每天的工作都是干啥?难道真的如传说中的是在打造大数据智能机器人?实际上,他们正在努力积极的探索人工智能在各行业中的应用,通过利用阿里云强大的计算平台加上顶级专业的算法与行业数据有机的融合,不断的...
    文章 2016-11-28 8168浏览量
  • 从数砖开源 Delta Lake 说起

    不过在开源大数据领域,在原有的海量数据分析上面支持更新操作,能够按照版本或者时间支持 snapshot isolation 一致性地读,已经是个很大的进步了,毕竟主要还是解决大数据场景问题。与此相对应,蚂蚁的 OceanBase ...
    文章 2019-04-25 5969浏览量
  • Hey,Siri,帮我把服务器A的X目录凌晨五点拷贝到B服务器...

    人无法从海量的语料中学习到规律,但是语料经过数学化后,经历深度网络,网络的的节点通过某种群体行为能够记录下这种规律,从而在新的数据到来后,能够这种隐藏的规律进行处理。人类的神经元亦是如此。群体往往能...
    文章 2016-09-09 1516浏览量
  • 【干货】徐葳:如何数据和人工智能让云更聪明?

    处理大量的文本不是问题,我们是做大数据的,每天处理几十亿行的文本日志毫无压力,通过处理这些海量数据,能分析出机器里到底哪里出了问题。但是采集这么多数据是很贵的,其实你不到这么多数据,你只要数据里边能...
    文章 2017-04-03 988浏览量
  • 清华徐葳:如何数据和人工智能让云更聪明?

    处理大量的文本不是问题,我们是做大数据的,每天处理几十亿行的文本日志毫无压力,通过处理这些海量数据,能分析出机器里到底哪里出了问题。但是采集这么多数据是很贵的,其实你不到这么多数据,你只要数据里边能...
    文章 2017-05-02 1547浏览量
  • 【云周刊】第170期:技术人生-看90后如何逆袭,从实习...

    阿里财报揭秘:阿里巴巴最忙的人这一年都 【物联网专题】从端到云—工业物联网项目全栈快速开发实践 AI设计师“鹿班”核心技术公开:如何1秒设计8000张海报?专访小邪:从十年技术之路看阿里技术体系的变革 ...
    文章 2018-05-11 4313浏览量
  • 从数砖开源 Delta Lake 说起

    不过在开源大数据领域,在原有的海量数据分析上面支持更新操作,能够按照版本或者时间支持 snapshot isolation 一致性地读,已经是个很大的进步了,毕竟主要还是解决大数据场景问题。与此相对应,蚂蚁的 OceanBase ...
    文章 2019-04-25 9231浏览量
  • 如何从 0 到 1 设计、构建移动分析架构

    通过数据平台对于数据处理和分析之后,产出了大量的数据指标等内容,放在 HDFS 上,可以通过 Hive/Sqoop 等技术,将数据从 HDFS 中,回流到在线系统中,提供高速访问。Hbase/OTS 等列式存储引擎提供了大容量,高性能...
    文章 2019-05-09 3257浏览量
  • bigData Ecosystem Unscramble

    我就简单点了,大牛你请自便,毕竟咱弄的仅仅是测试环境,又请注意了,hadoop优势在海量数据处理上,你测的太小的数据量就不要往这上面丢了,否则跑的太慢,你们又说人家这家伙能力不照,伤人家心啊,人家可是生来就不這事...
    文章 2014-03-10 953浏览量
  • 万字详解数据仓库、数据湖、数据中台和湖仓一体 ?...

    满足海量数据处理要求&xff1b;弱化数据格式&xff0c;数据被集成到 Hadoop 之后&xff0c;可以不保留任何数据格式&xff0c;数据模型与数据存储分离&xff0c;数据&xff08;包含了原始数据&xff09;在被使用的时候&xff0c;可以按照...
    文章 2022-04-27 77浏览量
  • 过年7天乐,学nodejs 也快乐

    node js因为单一线程就可以处理很高的并发,所以每台服务器只须处理一点点业务逻辑,由一个队列上的其他服务器处理其他逻辑,这样,单台服务器的复杂度就极大的降低,我认为复杂度是性能的天敌,只有消灭复杂度,才能有可靠...
    文章 2014-02-08 1016浏览量
  • 五分钟学后端技术:一篇文章告诉你什么是云计算!

    数据(big data),IT行业术语,是指无法在一定时间范围内常规软件工具进行捕捉、管理和处理数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。...
    文章 2020-04-02 2629浏览量
  • 数据能让警察被开除,政企如何应对大数据落地

    没错,大数据的准确定义是有四个V,也特质那些无法现有的软件工具提取、存储、搜索、共享、分析、处理海量、复杂的数据集合。那么如果现在政府数据很少,那就不做了吗?绝对不是这样的,其实大数据的核心不在于...
    文章 2017-08-01 1336浏览量
  • 互联网架构的三板斧

    数据更新热点,更新问题除了前面介绍的热点隔离和排队处理之外,还有些场景,如对商品的lastmodifytime字段更新会非常频繁,在某些场景下这些多条SQL是可以合并的,一定时间内只执行最后一条SQL就行了,可以减少对...
    文章 2016-06-11 11247浏览量
  • 大家买的阿里云服务器什么?能为大家带来什么作用

    现在到处看到各种云服务,云计算,感觉进入了云时代最近腾讯和阿里云各种优惠活动,一年只需要86块钱,很多人都买了自己的服务器他们买服务器干什么服务器又能干些什么不知道服务器买了可以干啥,怕跟着买了却白花了...
    文章 2020-07-08 14235浏览量
  • 揭秘Facebook背后的那些软件

    Hadoop是一个开源的map-reduce实现,它可以轻松处理海量数据。Facebook它来进行数据分析(我们都知道Facebook有巨量的数据)。Hive起源于Facebook,它使得针对Hadoop进行SQL查询成为可能,从而非程序员也可以方便...
    文章 2011-12-25 909浏览量
1 2 3 4 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
http://www.vxiaotou.com