• 2013年大数据全球技术峰会观后感

    下面是淘宝,他们的开源软件Oceanbase海量数据平台(数据库中间件),其原理也是通过对主键的取模,把一张大表拆分成N张小表并存储到各台服务器上,前端应用访问海量平台,经过海量平台处理,把请求发送到后端MySQL...
    文章 2017-11-23 1116浏览量
  • 海量用户通信业务平台的设计和数据处理实践【大数据...

    但一般来讲,当前绝大部分企业或者业务所谓的数据运营还都是BI层面,还没到“大数据”层面,所以经常搞着搞着就觉得也没啥意思,“热闹”大于“实用”,花了很多钱,最后发现对于发展业务也不是那么有效,因为事实上...
    文章 2017-05-02 1222浏览量
  • 【大数据100分】CESI吴东亚:大数据标准及应用(高级...

    人民大学等研究院所和百度、阿里等公司正在开展大数据处理技术和平台研制工作;在标准化方面,全国信息技术标准化技术委员在充分调研基础上,提出了技术体系参考模型和标准体系框架,提出了术语、体系结构、数据表示...
    文章 2017-04-03 1409浏览量
  • 讲真:序列化必读

    这些年随着云技术发展,对海量数据传输、存储和安全就变的越来越重要,RFC解决的是公有问题,序列化解决的就是私有问题。多年前项目实施中需要跨设备数据传输,Y哥打算把结构体强制类型转换以后扔过来,为这事跟他PK...
    文章 2018-08-03 1639浏览量
  • 为什么基于机器学习的产品很难见到?

    你觉得深度学习很牛啊,连图片和声音识别都搞得很好了,搞些文本识别有啥意思。可很少有人坦白告诉你,到目前为止,深度学习尚未在自然语言处理中有突破进展,NLP比图像和语言识别实际上更难。图像和语音识别出来是...
    文章 2017-08-01 1255浏览量
  • 从数砖开源 Delta Lake 说起

    不过在开源大数据领域,在原有的海量数据分析上面支持更新操作,能够按照版本或者时间支持 snapshot isolation 一致性地读,已经是个很大的进步了,毕竟主要还是解决大数据场景问题。与此相对应,蚂蚁的 OceanBase ...
    文章 2019-04-25 5969浏览量
  • 日志易:IT 运维分析及海量日志搜索的实践之路(上)

    深圳站的演讲实录,包括介绍ITOA,比较各种日志处理技术等话题,重点讲解实时日志搜索分析引擎,比较索引阶段对日志做结构化(Schema on Write)及检索阶段对日志做结构化(Schema on Read),在搜索框里编写搜索...
    文章 2017-05-27 5418浏览量
  • 从数砖开源 Delta Lake 说起

    不过在开源大数据领域,在原有的海量数据分析上面支持更新操作,能够按照版本或者时间支持 snapshot isolation 一致性地读,已经是个很大的进步了,毕竟主要还是解决大数据场景问题。与此相对应,蚂蚁的 OceanBase ...
    文章 2019-04-25 9231浏览量
  • 在MySQL和PostgreSQL之外,为什么阿里要...HybridDB数据库...

    BI具有着明确的分析需求,清晰地知道需要处理哪些信息,并且如何最终获得多维度的SQL类型数据,这种多维度的分析对应的是OLAP处理技术。在实际商业分析应用中,公司复杂信息模型、多样化的分析需求会给数据库带来极...
    文章 2016-12-09 13539浏览量
  • Hey,Siri,帮我把服务器A的X目录凌晨五点拷贝到B服务器...

    人无法从海量的语料中学习到规律,但是语料经过数学化后,经历深度网络,网络的的节点通过某种群体行为能够记录下这种规律,从而在新的数据到来后,能够用这种隐藏的规律进行处理。人类的神经元亦是如此。群体往往能...
    文章 2016-09-09 1516浏览量
  • 大约三点钟 用友与阿里“4+1”战略合作被刷屏

    用友将基于阿里开放平台重构电商ERP,也就是前一天发布的惠商云中的“电商通”,为企业客户在阿里的淘宝、天猫等电商平台上进行电商订单处理的互联网应用服务和数据接口服务,阿里将在“电商通”的测试资源、应用...
    文章 2017-09-06 1592浏览量
  • 世界人工智能发展究竟到了什么水平?

    这个新名目又是啥意思呢?不得不承认,“深度学习”是一个带有迷惑性的名目,因为它会诱使很多外行认为人工智能系统已经可以像人类那样“深度地”理解自己的学习内容了。但真实情况是:按照人类的“理解”标准,这样...
    文章 2020-07-29 1989浏览量
  • 五分钟学后端技术:一篇文章告诉你什么是云计算!

    数据(big data),IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。...
    文章 2020-04-02 2629浏览量
  • 那些年,追过的开源软件和技术

    Hadoop的高吞吐,海量数据处理的能力使得人们可以方便地处理海量数据。但是,Hadoop的缺点也和它的优点同样鲜明——延迟大,响应缓慢,运维复杂。Storm:所谓流处理框架,就是一种分布式、高容错的实时计算系统。...
    文章 2017-05-02 1010浏览量
  • Spark分布式计算引擎的应用

    分布式存储系统中海量数据的分发方案: 1.数据量分布 2.数据范围分布 3.Hash分片/消息队列 4.一致性Hash 对于Reduce类型的任务分发的重点取决于之前的Map和Shuffle过程。从逻辑拆分开始描述、节点之间距离计算以上...
    文章 2018-12-06 1733浏览量
  • 数据入门介绍和学习路线

    你希望有个更高层更抽象的语言层来描述算法和数据处理流程。于是就有了Pig和Hive。?Pig是接近脚本方式去描述MapReduce&xff0c;Hive则用的是SQL。它们把脚本和SQL语言翻译成MapReduce程序&xff0c;丢给计算引擎去计算&...
    文章 2022-04-28 39浏览量
  • 如何自己动手写一个监控系统?

    单个样本到底是啥意思?客户端调用埋点jar包里的API,会调用很多次,然后如果你定义了6秒钟收割一次进行数据采样汇总,上传到服务器,那就是一个采样样本。PS:如果在这6秒钟某个API被调用1万次,成功6000次,那么只会...
    文章 2017-08-01 1717浏览量
  • 柠檬哥肝了半个月的「后端技术学习路线」长样?

    Linux 高级编程Linux「高级编程」的意思是比上面的 Linux 基础操作更深入一个层次。相关历史文章&xff1a;万字长文&xff0c;别再说你不懂Linux内存管理了&xff08;合辑&xff09;xff0c;30 张图给你安排的明明白白学会了 Linux...
    文章 2022-04-24 89浏览量
  • 为什么你精通CRUD,却搞不懂数据库的基本原理?

    而现在,我在一个每天要处理海量数据的公司里工作,对于数据方面的学习已经不仅仅停留在数据库了,我还要接触数据仓库、分布式数据库以及各种大数据的应用场景,学习数据知识的道路看来短时间内是走不完了。...
    文章 2020-02-25 1271浏览量
  • TensorFlow读写数据

    前言 只有光头才能变强。...回顾前面: 从零开始学TensorFlow【01-...公众号内有200多篇原创技术文章、海量视频资源、精美脑图,不妨来关注一下!下一篇文章打算讲讲如何理解axis~ 觉得我的文章写得不错,不妨点一下赞!
    文章 2019-03-16 1132浏览量
  • 为什么 Deep Learning 最先在语音识别和图像处理领域...

    而谷歌、微软他们的训练数据则更是海量的几万个小时。同样,在图像识别领域,ImageNet则有百万张图片,这么多的数据让当年六万张手写数字的mnist情何以堪。正是这些大量的数据,使得深度学习应用到这两个领域成为...
    文章 2017-05-02 3219浏览量
  • 赛后复盘-DataCastle 科大讯飞AI营销算法大赛

    科大讯飞AI营销云在高速发展的同时,积累了海量的广告数据和用户数据,如何有效利用这些数据去预测用户的广告点击概率,是大数据应用在精准营销中的关键问题,也是所有智能营销平台必须具备的核心技术。本次大赛提供...
    文章 2018-10-09 5196浏览量
  • Elasticsearch 的前世今生—Elastic Stack 实战手册

    可以理解为将数据放进一个管道内进行处理,并且就跟真正的自来水管一样,管道由一截一截管子组成,每一个小管代表着一个数据处理的流程,每一个流程只做一件事情,然后可以根据数据的处理需要,选择多个不同类型的...
    文章 2021-05-19 723浏览量
  • 《Akka应用模式:分布式应用程序设计实践指南》读书...

    特别是在海量数据的场景下,就更麻烦了。引入redis等第三方分布式缓存虽然可以折中的解决效率的问题,但也引入了系统的复杂性、不稳定性。书籍的原作者,用一个“死循环”Ask模式实现了最少一次,但我非常不喜欢这个...
    文章 2018-06-12 1248浏览量
  • 后端技术杂谈开篇:云计算,大数据与AI的故事

    1.2 灵活就是想时要都有,想要多少都行 管理的目标就是要达到两个方面的灵活性。哪两个方面呢?比如有个人需要一台很小很小的电脑,只有一个CPU,1G内存,10G的硬盘,一兆的带宽,你能给他吗?像这种这么小规格的...
    文章 2018-07-11 1473浏览量
  • 从零开始学TensorFlow

    其实回想刚学Java的时候,也是这么一个过程,当你从屏幕看到“HelloWorld”了以后,大概率来说也是不了解相关的API具体做了什么事(甚至连API都不知道是啥意思)。但花一段时间去学习了以后,就会发现,原来HelloWorld...
    文章 2019-03-09 960浏览量
  • Java 程序员 面试前必备知识

    惰性加载:通过延迟加载技术可以避免过多的,过早的加载表里面的数据,从而降低系统的内存开销。Hibernate中使用代理来实现这一个效果,要想使用在核心配置文件中对lazy-load属性设值为true即可。Spring AOP解决了...
    文章 2017-04-18 1854浏览量
  • 一个案例带你深入理解Volatile

    二级缓存(L2 Cache):二级缓存的指令和数据是共享的,二级缓存的容量直接影响CPU的性能,吓得我马上看了掏出看了下:三级缓存(L3 Cache):作用是进一步降低内存的延迟,同时提升海量数据计算的性能。三级缓存属于...
    文章 2022-01-06 51浏览量
  • 查询那么慢?

    1.7 小结以上列举了 MySQL 常见慢查询原因和处理方法&xff0c;介绍了应对较大数据场景的常用方法。分库分表和读写分离是针对大数据或并发场景的&xff0c;同时也为了提高系统的稳定和拓展性。但也不是所有的问题都最适合...
    文章 2022-01-12 56浏览量
  • 支付宝应用的架构到底有多牛?

    支付宝海量支付背后最解渴的设计是&xff1f;换句话说&xff0c;实现支付宝高 TPS 的最关键的设计是&xff1f;LDC 是&xff1f;LDC 怎么实现异地多活和异地灾备的&xff1f;CAP 魔咒到底是&xff1f;P 到底怎么理解&xff1f;什么...
    文章 2022-01-10 61浏览量
1 2 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
http://www.vxiaotou.com