• 【大数据学习】数据化运营并不难?关键是这些技术你...

    DataHub 有些类似有Kafuka,是一个海量数据的订阅和消费服务。DataHub中的数据订阅是基于Topic的。流数据应用场景,数据大屏。网站的访问数据是实时变化的,看起来非常炫酷。阿里双十一的实时大屏就是流数据结合数据...
    文章 2017-01-22 7368浏览量
  • 一场IT民工 与 人贩子 之间的战争-感受来自PostgreSQL...

    此时流式处理技术就派上用场啦,比如我们已经锁定了嫌疑人的范围,从技术角度看,就是从实时产生的海量的信息中将嫌疑人的信息过滤出来,或者当遇到嫌疑人的信息时,即时的触发通知,告诉公安GG。流计算的用法很多...
    文章 2016-12-22 10044浏览量
  • 讲真:序列化必读

    这些年随着云技术发展,对海量数据传输、存储和安全就变的越来越重要,RFC解决的是公有问题,序列化解决的就是私有问题。多年前项目实施中需要跨设备数据传输,Y哥打算把结构体强制类型转换以后扔过来,为这事跟他PK...
    文章 2018-08-03 1639浏览量
  • 【干货】徐葳:如何数据和人工智能让云更聪明?

    我们是做大数据处理系统的,这些数据对我们说很小,所以我们能够主动检测出系统有什么问题。这样我们机器的计算,代替了人类的智能。刚刚说了“看”的问题,假定我可以看到系统有什么问题,有什么优化的,下面...
    文章 2017-04-03 988浏览量
  • bigData Ecosystem Unscramble

    我就简单点了,大牛你请自便,毕竟咱弄的仅仅是测试环境,又请注意了,hadoop优势在海量数据处理上,你测的太小的数据量就不要往这上面丢了,否则跑的太慢,你们又说人家这家伙能力不照,伤人家心啊,人家可是生来就不這事...
    文章 2014-03-10 953浏览量
  • 清华徐葳:如何数据和人工智能让云更聪明?

    我们是做大数据处理系统的,这些数据对我们说很小,所以我们能够主动检测出系统有什么问题。这样我们机器的计算,代替了人类的智能。刚刚说了“看”的问题,假定我可以看到系统有什么问题,有什么优化的,下面...
    文章 2017-05-02 1547浏览量
  • 万字详解数据仓库、数据湖、数据中台和湖仓一体 ?...

    满足海量数据处理要求&xff1b;弱化数据格式&xff0c;数据被集成到 Hadoop 之后&xff0c;可以不保留任何数据格式&xff0c;数据模型与数据存储分离&xff0c;数据&xff08;包含了原始数据&xff09;在被使用的时候&xff0c;可以按照...
    文章 2022-04-27 77浏览量
  • 互联网架构的三板斧

    数据更新热点,更新问题除了前面介绍的热点隔离和排队处理之外,还有些场景,如对商品的lastmodifytime字段更新会非常频繁,在某些场景下这些多条SQL是可以合并的,一定时间内只执行最后一条SQL就行了,可以减少对...
    文章 2016-06-11 11247浏览量
  • 为什么你精通CRUD,却搞不懂数据库的基本原理?

    而现在,我在一个每天要处理海量数据的公司里工作,对于数据方面的学习已经不仅仅停留在数据库了,我还要接触数据仓库、分布式数据库以及各种大数据的应用场景,学习数据知识的道路看来短时间内是走不完了。...
    文章 2020-02-25 1271浏览量
  • 报表 BI 选型的那些事

    报表自带的 APP,不能和整体项目的 app 集成,本身又缺少用户组织功能或不合适,没法拿来直接,也不好二次开发补充功能,结果就是基本上还是没法 所以这些指标如果列出来,就会误导一些对报表还不太了解的选型...
    文章 2020-05-08 956浏览量
  • 数据能让警察被开除,政企如何应对大数据落地

    没错,大数据的准确定义是有四个V,也特质那些无法现有的软件工具提取、存储、搜索、共享、分析、处理海量、复杂的数据集合。那么如果现在政府数据很少,那就不做了吗?绝对不是这样的,其实大数据的核心不在于...
    文章 2017-08-01 1336浏览量
  • 过年7天乐,学nodejs 也快乐

    传统的web服务器因为单台服务器可以承受的链接数有限,所以就弄一大堆海量服务器分担负载, 但是单台服务器的业务逻辑依然很复杂,软件开发的复杂度整体上依然没有降低,不信,你看看你的各种性能调优和可维护行的知识,...
    文章 2014-02-08 1016浏览量
  • 系统架构-性能篇章2(系统拆分2-问题)

    在Java中为了保证一致性可以使用AtomicInteger相关的变量执行incrementAndGet操作活得最新的数据,保证一致性,注意这里虽然可能会造成序列的浪费,也就是数据库中的序列跳跃,但是数据库本身也是存在这些现象的,...
    文章 2011-11-15 1561浏览量
  • 网络江湖里爬虫玩的是一场“无间道”

    数字时代,咨询公司可以利用爬虫技术快速获取海量信息,并可以将海量信息进行专业化处理和分析归类,从而为咨询服务提供有利的数据支撑,更多的数据信息样本支持更准确的决策。不仅如此,很多企业也会爬虫...
    文章 2018-09-13 2074浏览量
  • 一文带你认识Spring事务

    前言 只有光头才能变强。...Spring事务管理我相信大家都得很多,但可能仅仅局限于一个@Transactional...公众号内有200多篇原创技术文章、海量视频资源、精美脑图,不妨关注一下!觉得我的文章写得不错,不妨点一下赞!
    文章 2019-01-31 1231浏览量
  • 后端技术杂谈开篇:云计算,大数据与AI的故事

    我们现在在网上的所有行为都应该感谢他的功劳,如果他将这个技术拿来收钱,应该和比尔盖茨差不多有钱。例如在闭源的世界里有windows,大家windows都得给微软付钱,开源的世界里面就出现了Linux。比尔盖茨靠windows...
    文章 2018-07-11 1473浏览量
  • 最近学到的前后端分离知识

    AJAX请求Servlet,Servlet返回JSON数据回去,AJAX到Servlet返回的数据进行解析和处理。这里压根就不需要JSP了(纯HTML+AJAX),这算是前后端分离的一种了 在开发上体验:如果完全使用HTML+AJAX的话,会发现其实需要...
    文章 2019-08-08 1310浏览量
  • 为什么 Deep Learning 最先在语音识别和图像处理领域...

    反之,对于NLP问题说,我们到的一段段文本,实际上都是由人脑处理过的,我们什么样的特征刻画它才足够原始呢?再比如语音信号处理的另一个任务——说话人识别,应用深度学习也是有一定困难的,一段语音中有...
    文章 2017-05-02 3219浏览量
  • 减少存储过程封装业务逻辑-web开发与传统软件开发的...

    3.系统数据处理量巨大,性能要求极为苛刻,这往往意味着我们必须通过经过高度优化的SQL语句(或存储过程)才能达到系统性能设计指标。还有很多技术会鄙视:程序员,为什不用存储过程封装业务逻辑,我看到一个网友...
    文章 2013-12-15 1369浏览量
  • 深度推荐:创业团队为什么要选择Oracle而不是MySQL?

    别急,你们是不是想说,如果创业初期就考虑太多,过重的技术会导致还没站稳脚就被对手死了!问题是你们告诉我,只是单纯的数据库操作,Oracle能比MySQL复杂多少?说了那么多虚的,举个例子可能会更有说服力一些...
    文章 2017-05-02 2026浏览量
  • 如何自己动手写一个监控系统?

    hbase:用来存储海量历史数据,这样如果你收到了报警信息,你可以查啊,调出那个时候的数据看是不是真的有问题,用于历史回溯。mq:用于存数据,作为实时计算的数据源啊,不然谁发送报警短信和邮件呢?然后hbase...
    文章 2017-08-01 1717浏览量
  • 在AWS上的架构部署与设计

    后来有幸接触到了大型亿级的基础架构云计算项目,主要服务于智能驾驶的项目,在私有云上架构、部署资源,主要做智能能驾驶 3.0/4.0战略要求的算法场景仿真测试、深度学习模型训练收集的海量数据存储需求。...
    文章 2021-08-19 1928浏览量
  • 把 14 亿人拉到一个微信群,如何实现?

    所以 21.9KHz 就是不了。幸好 IT 界有个摩尔定律&xff1a;每 18 个月 CPU 性能就能翻倍&xff08;或者价钱是一半&xff09;虽然现有科技已经很难让主频提升&xff08;某牙膏厂拼命挤也只有 5 Ghz&xff09;但假设我们使用了...
    文章 2021-12-16 49浏览量
  • Google-protobuf与FlatBuffers数据的序列化和反序列化

    由于Google公司赖以吹嘘的就是它的海量数据和海量处理能力。对于几十万、上百万机器的集群,动不动就是PB级的数据量,哪怕性能稍微提高 0.1%也是相当可观滴。所以Google自然无法容忍XML在性能上的明显缺点。再加上...
    文章 2017-11-16 1430浏览量
  • Google-protobuf与FlatBuffers数据的序列化和反序列化

    由于Google公司赖以吹嘘的就是它的海量数据和海量处理能力。对于几十万、上百万机器的集群,动不动就是PB级的数据量,哪怕性能稍微提高 0.1%也是相当可观滴。所以Google自然无法容忍XML在性能上的明显缺点。再加上...
    文章 2017-11-07 1363浏览量
  • 一个案例带你深入理解Volatile

    二级缓存(L2 Cache):二级缓存的指令和数据是共享的,二级缓存的容量直接影响CPU的性能,吓得我马上看了掏出看了下:三级缓存(L3 Cache):作用是进一步降低内存的延迟,同时提升海量数据计算的性能。三级缓存属于...
    文章 2022-01-06 51浏览量
  • 什么是ZooKeeper?

    前言 只有光头才能变强。...上次写了一篇 什么是消息队列?以后,本来想入门一下Kafka的(装一下环境、...公众号内有200多篇原创技术文章、海量视频资源、精美脑图,不妨关注一下!觉得我的文章写得不错,不妨点一下赞!
    文章 2019-04-15 1660浏览量
  • 翻Netty》,写一个底层通信框架需要考虑哪些?

    配置启动服务、建立连接、接收数据处理业务、发送数据、关闭连接、关闭服务。从这条主线入手&xff0c;分别考虑上述说的&xff0c;易用的接口、I/O 模型、编解码、开箱即的协议支持、线程模型、连接管理、内存管理等。...
    文章 2022-05-12 23浏览量
  • GMTC 大前端时代前端监控的最佳实践

    其实统计首屏时间本身就是浏览器的职责,交由浏览器来处理是最好的。目前W3C关于首屏统计已经进入了提议阶段,坐等W3C再次标准化。大家可以在github上看到最新进。限于篇幅,前端监控其它新的变化不再展开。讲了这么...
    文章 2018-06-29 3342浏览量
  • 我在蚂蚁金服做SRE

    众所周知蚂蚁金服的风控技术在业内是非常先进的,“你敢付,我敢赔”的用户保障计划背后就是海量的风控模型和策略在支撑,而这些模型和策略的执行又依赖严谨正确的大数据。如何保障策略模型计算所依赖数据的完整性、...
    文章 2019-04-04 13494浏览量
1 2 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
http://www.vxiaotou.com