-
一份十分完整的CPU 100%排查优化指南
所属栏目:[教程] 日期:2019-04-23 热度:183
最近又收到了运维报警:表示有些服务器负载非常高,让我们定位问题。 还真是想什么来什么,前些天还故意把某些服务器的负载提高(没错,老板让我写个 Bug!),不过还好是不同的环境,互相没有影响。 定位问题 拿到问题后首先去服务器上看了看,发现运行的只[详细]
-
大数据开发:剖析Hadoop和Spark的Shuffle过程差异
所属栏目:[教程] 日期:2019-04-23 热度:149
一、前言 对于基于MapReduce编程范式的分布式计算来说,本质上而言,就是在计算数据的交、并、差、聚合、排序等过程。而分布式计算分而治之的思想,让每个节点只计算部分数据,也就是只处理一个分片,那么要想求得某个key对应的全量数据,那就必须把相同ke[详细]
-
你应该知道的HBase基础,都在这儿了
所属栏目:[教程] 日期:2019-04-23 热度:158
阿里妹导读:2006 年10 月Google 发布三架马车之一的《Bigtable:A Distributed Storage System for Strctured Data》论文之后,Powerset 公司就宣布 HBase 在 Hadoop 项目中成立,作为子项目存在。后来,在2010 年左右逐渐成为 Apache 旗下的一个顶级项目[详细]
-
锐捷亮相智慧机场建设发展高峰会!为机场插上智慧的翅膀
所属栏目:[教程] 日期:2019-04-23 热度:72
4月17日~19日,第四届全国民航互联网+智慧机场建设发展高峰会在天府之国成都举行。在这个展现民航相关信息化产业的最新信息技术的重磅舞台,锐捷网络作为中国数据通信解决方案提供商应邀亮相,带来了业界领先的场景化智慧机场解决方案,全面展示了锐捷助[详细]
-
驱动智能时代产业变革,华为智能计算2019蓄力出击!
所属栏目:[教程] 日期:2019-04-23 热度:153
【51CTO.com原创稿件】记者见到华为智能计算业务部市场营销总监师斌的第一个照面,就忍不住先八卦了一个问题:作为一个刚刚成立才4个月的部门,华为智能计算的活动是不是安排得太密集了些? 记者所言的密集并非凭空想象,华为智能计算的活动之多的确当得起[详细]
-
大规模集群下的Hadoop NameNode
所属栏目:[教程] 日期:2019-04-20 热度:147
本文我们来看看,如果大量客户端对NameNode发起高并发(比如每秒上千次)访问来修改元数据,此时NameNode该如何抗住? 一、问题源起 我们先来分析一下,高并发请求NameNode会遇到什么样的问题。 大家现在都知道了,每次请求NameNode修改一条元数据(比如说申请[详细]
-
大数据生态系统入门必看:Pig、Hive、Hadoop、Storm等白话诠释
所属栏目:[教程] 日期:2019-04-20 热度:149
问题导读 大数据该如何存储到硬盘上? 存储数据后,该考虑如何处理数据 什么是Map?什么是Reduce? Hive、Pig、Storm技术是如何产生的? 大数据本身是个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把[详细]
-
大数据分析建模及其应用建议
所属栏目:[教程] 日期:2019-04-20 热度:134
在数字经济时代,互联网、智能设备和其他形式的信息技术的爆炸性增长使得数据以同样令人印象深刻的速度增长,企业经营的各个阶段都可以被记录下来,产品销售的各个环节也被记录下来,客户的消费行为和网上行为都被采集下来。数据已成为一种重要的生产要素[详细]
-
5G来了,但你要付出这些代价! - 网络·安全技术周刊第389期
所属栏目:[教程] 日期:2019-04-20 热度:96
【责任编辑:蓝雨泪 TEL:(010)68476606】 点赞 0[详细]
-
苹果、高通、英特尔关于5G的那些事
所属栏目:[教程] 日期:2019-04-20 热度:142
48小时之内,苹果、高通、英特尔,三家风口浪尖的企业上演了一场年度大戏。苹果和高通最终决定不计前嫌,以和解的方式结束了旷日持久的专利拉锯战;而随后英特尔宣布的5G业务调整,最终,苹果的5G手机里,出现的将是高通的芯片。 4月16日,高通与苹果宣布达[详细]
-
5G已来,携手产业共迎5G规模商用
所属栏目:[教程] 日期:2019-04-20 热度:197
[中国,深圳,2019年4月17日] 5G发展速度比想象更快,华为已经做好准备携手产业共同迎接5G规模商用的到来。在4月17日华为2019分析师大会5G媒体圆桌会议上华为5G产品线副总裁甘斌向分析师和媒体表示。面对即将到来的5G规模商用,华为如何看待产业发展趋势,[详细]
-
从技术演变的角度看互联网后台架构
所属栏目:[教程] 日期:2019-04-20 热度:195
这是去年在部门内部做的一个面向后台开发新同学的课程,因为其他BG一些同学要求分享,所以发一下。 其实内容都是些常见开源组件的high level描述,比如flask, express框架,中间件的演化,micro service的概念,一些对nosql/column based db的概念介绍,do[详细]
-
程序员如何编写优雅的Dockerfile
所属栏目:[教程] 日期:2019-04-20 热度:81
Kubernetes要从容器化开始,而容器又需要从Dockerfile开始,本文将介绍如何写出一个优雅的Dockerfile文件。 文章主要内容包括: Docker容器 Dockerfile 使用多阶构建 感谢公司提供大量机器资源及时间让我们可以实践,感谢在此专题上不断实践的部分项目及人[详细]
-
深入浅出百亿请求高可用Redis(codis)分布式集群揭秘
所属栏目:[教程] 日期:2019-04-20 热度:149
一、背景 随着直播元年开启,越来越多的直播产品如春笋般出现,在拉动营收的过程中,产品竭尽全力思考着各种活动来刺激用户的消费欲望,而这类活动的基础形式就是榜单,在2016年我们基于cmem及扫描流水表的方式来实现榜单排名,2017开始,我们对原有系统进[详细]
-
一文带你了解什么是API和SDK
所属栏目:[教程] 日期:2019-04-20 热度:147
随着软件规模的日益庞大,开发者常常需要把复杂的系统划分成小的组成部分,这个时候,编程接口的设计就显得尤为重要。良好的接口设计可以降低系统各部分的相互依赖,提高组成单元的内聚性,降低组成单元间的耦合程度,从而提高系统的维护性和扩展性。 而对[详细]
-
详解NodeJS和命令行程序
所属栏目:[教程] 日期:2019-04-19 热度:86
源起 植根于Unix系统环境下的程序,很多都把贯彻Unix系统设计的哲学作为一种追求。Unix系统管道机制的发明者Douglas McIlroy把Unix哲学总结为三点: 专注做一件事,并做到极致。 程序协同工作。 面向通用接口,如文本数据流。 随着Unix/Linux系统在服务器[详细]
-
浪潮网络:发挥智慧网络平台实力 赋能伙伴 共拓未来
所属栏目:[教程] 日期:2019-04-19 热度:179
4月16-17日,IPF 2019浪潮云数据中心合作伙伴大会在上海隆重举行,本次会议主题为智慧凝聚,来自全国各地的行业ISV、SI、分销商等近2000位合作伙伴代表参加会议。浪潮网络作为浪潮基础设施平台建设的重要一环,携全系列产品精彩亮相,并发布全新的浪潮网络[详细]
-
华为新ICT强势赋能,令企业主动拥抱数字化转型
所属栏目:[教程] 日期:2019-04-19 热度:132
【51CTO.com原创稿件】2019年4月16-18日,华为第16届全球分析师大会在中国深圳隆重召开。在大会第一天下午企业业务分论坛上,华为企业业务如何助力各行业数字化转型成为关注热度最高的议题。 华为企业BG全球Marketing总裁邱恒在《引领新ICT:智能,联接,[详细]
-
家庭路由器新品必须支持IPv6 工信部已发文
所属栏目:[教程] 日期:2019-04-19 热度:113
据工信部网站消息,工信部16日印发《关于开展2019年IPv6网络就绪专项行动的通知》(以下简称《通知》)。《通知》内提到,新部署的家庭网关设备应全部支持IPv6,并默认配置支持IPv4/IPv6双栈,能够为网关下挂设备分配IPv6地址;到2019年末,完成70%存量智能家[详细]
-
5G已经来了,Wi-Fi 6还会远么?
所属栏目:[教程] 日期:2019-04-19 热度:53
即将于2019下半年发布的WI-Fi 6,将使无线网络比以往更快、更可靠、更节能,但这究竟意味着什么呢? Wi-Fi 6是Wi-Fi联盟为802.11ax命名的新名字,旨在使Wi-Fi世代更易于普通计算机用户理解。Wi-Fi 6将取代Wi-Fi 5(802.11ac),取代Wi-Fi 4(802.11n)作为Wi-Fi[详细]
-
Puppet自动化集群管理基础篇
所属栏目:[教程] 日期:2019-04-18 热度:153
Puppet作为开源的集群管理框架,有着简单易用、快速部署、使用范围广等特性,已经积累了超过250家的用户,包括阿里巴巴、新浪、Oracle等大公司。本文作者将带领大家了解puppet技术及其简单的应用。 背景简介 在传统的服务器集群管理中,每增加一台服务器,[详细]
-
一篇文章看懂 Spark RDD
所属栏目:[教程] 日期:2019-04-18 热度:191
1 简介 Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。它产生于 UC Berkeley AMP Lab,继承了 MapReduce 的优点,但是不同于 MapReduce 的是,Spark 可以将结果保存在内存中,一直迭代计算下去,除非遇到 shuffle 。因此 Spark 能更好的[详细]
-
大数据告诉你,996戳中了谁又戳痛了谁?
所属栏目:[教程] 日期:2019-04-18 热度:170
工作996,生病ICU,一句原本程序员之间的自嘲,在最近一个月却突然引起全社会的关注。先来看看近一个月996工作制在网络上的热度走势。 996工作制引发社会关注 数据来源于新华睿思数据云图分析平台 工作996,生病ICU。996工作制讨论热度的爆发,源于程序员3[详细]
-
华为发布以网络自动驾驶为目标的下一代运维构架,预计为运营商节省运维成本25%
所属栏目:[教程] 日期:2019-04-18 热度:191
2019年4月17日,HAS2019,华为发布了以自动驾驶为目标的下一代网络构架。预计在10年之内电信运营商网络将迈入L5自动驾驶阶段,为运营商节省运维成本25%,华为SoftCOM AI解决方案总裁韩雨发先生说。 近几年来,网络走向自动驾驶逐步成为整个电信行业的共识[详细]
-
华为发布自动驾驶电信网络SoftCOM通信智能白皮书
所属栏目:[教程] 日期:2019-04-18 热度:143
[中国,深圳,2019年04月17日] 今日,在深圳举办的华为2019年分析师大会期间,华为正式发布自动驾驶电信网络SoftCOM通信智能白皮书。诠释自动驾驶电信网络的战略演进,架构创新和分级理念,展示电信网络AI方面的平台价值,场景探索和案例落地,为AI在自动[详细]