做大数据有几年了，这些年耳濡目染了一些大数据管理平台的使用，但是或多或少使用起来，都不怎么方便，所以决定自己来实现一个简单的大数据平台
最近一段时间在研究后台服务器测试技术，需要对后台服务器的各项性能指标进行实时监控和统计，也由此让我回运维
岳毅，携程高级研发经理，负责酒店数据智能平台研发，大数据技术创新工作。喜欢探索研究大数据的开源技术框架。
作为一个应届毕业生，进入阅文集团，加入到通用平台中心之后，随着日常工作的逐步深入，我渐渐了解阅文的技术体系，其中尤其以腾讯TARS平台最为重要。目前TARS平台承载了阅文内部绝大多数的服务，每日接口调用最大值近百亿，单业务峰值可在数万每秒，近300个业务服务。作为一个新人，我来讲下我从TARS小白到熟练工的历程中整理的一些知识点。
1、用户APP采用JAVA环境布署，初始环境两台服务器，实现负载均衡与高可用，前端负载使用nginx 做负载
经常有同事提到空闲的云主机，能否针对不同的客户使用起来？今天我们用Zabbix这个开源的监控软件搭建线下服务器的监控平台，充分将云资源用起来，随时随地可以监测线下设备的运行状况。
某月黑风高之夜，某打车平台上线了一大波（G+）优惠活动，众人纷纷下单。于是乎，该打车平台使用的智能提示服务扛不住直接趴窝了（如下图）。事后，负责智能提示服务开发和运维的有关部门开会后决定：必须对智能提示服务进行一次全面深入的性能摸底，立刻！现在！马上！ 那么一大坨问题就迎面而来：对于智能提示这样的后台服务，性能测试过程中应该关心那些指标？这些指标代表什么含义？这些指标的通过标准是什么？下面将为您一一解答。 概述 不同人群关注的性能指标各有侧重。后台服务接口的调用者一般只关心吞吐量、响应时间等外部指标。
蓝鲸是腾讯IEG十多年研运探索的经验与成果，积累了很多人的智慧与付出。由于腾讯IEG的业务特殊性，蓝鲸体系天生地展现出对异构业务的友好，避免了需要重复造轮子才能完成对多业务的支持。本次分享主要介绍蓝鲸研运体系在腾讯内的发展、应用及未来的演进之路。
话说3.14号早上，小Z像平常一样来到公司，发现一帮同事在一台电脑前围观，不过各个表情诧异的样子，他也好奇的凑过去看看有啥新奇的，电脑里除了系统文件，无一例外被加了Tiger4444的后缀。中勒索病毒了。小Z心里咯噔一下，明明之前做了很多的防守动作，为什么还是中招了？
对于站长来说,网站的安全维护管理是重中之重,但是在建站后我们发现,再配置齐全的网站也会遭遇各种攻击扫描.这时候你就感觉服务器是一个裸奔的鸡蛋，惯性思维会想和普通电脑一样安装防护软件,这里需要注意了,很多方面不是应该就要做,而需要方法和技巧.
首先祝贺你选择学习Linux，你可能即将踏上Linux的工作之旅，出发之前，让我带你来看一看关于Linux和Linux运维的一切。
安全是各个国家的城市普遍面临的重要问题，在一般情况下，城市安全是指城市中大多数人的生命、健康、公共和私人财产安全。和城市安全相关的事件包括犯罪案件、交通事故、城市火灾、瘟疫感染、大规模暴力、食品安全、环境安全、网络安全、恐怖袭击等社会安全问题。
概要 为什么要做监控 线上发布了服务，怎么知道它一切正常，比如发布5台服务器，如何直观了解是否有请求进来，访问一切正常。 当年有一次将线上的库配置到了Beta，这么低级的错误，排错花了一个通宵，十几个人。 某个核心服务挂了，导致大量报错，如何确定到底是哪里出了问题。 SOA带来的问题，调用XX服务出问题，很慢，是否可以衡量？ 由于业务系统数量大，每天都会产生大量的系统日志和业务日志，单流式业务的一台服务器产生的日志达400M 想直接查看内容打开可能几分钟，而且内容之多根本无法查看，给开发和运维带来诸多不便，
项目需要实现主备双热自动切换的功能，保证系统7*24小时不间断运行；现已有两台双网卡的IBM的服务器，为了不再增加成本采购独立外部存储设备和双机热备软件，采用了linux下开源的HA软件进行部署，即heartbeat+monit方式。
阶段一：从无到有 2011.1.21 微信正式发布。这一天距离微信项目启动日约为2个月。就在这2个月里，微信从无到有，大家可能会好奇这期间微信后台做的最重要的事情是什么？ 我想应该是以下三件事： 1确定了微信的消息模型 微信起初定位是一个通讯工具，作为通讯工具最核心的功能是收发消息。微信团队源于广硏团队，消息模型跟邮箱的邮件模型也很有渊源，都是存储转发。 上图展示了这一消息模型，消息被发出后，会先在后台临时存储；为使接收者能更快接收到消息，会推送消息通知给接收者；最
1）崩溃率：通过分析日志（底层Logstash将日志导入到数据库中），实时获取日志的状态码，计算出4xx，5xx的状态，和当前日志总量相比，得出结果，通过获取数据库中的数据，以画图的形式展示在页面中。
作者 | 朱小厮的博客 来源 | https://mp.weixin.qq.com/s/XL7F03HFzRX81Zllf4-1Ww 架构以及我理解中架构的本质 在开始谈我对架构本质的理解之前，先谈谈自己的个人见解，千万级规模的网站感觉数量级是非常大的，对这个数量级我们战略上要重视它 ，战术上又要藐视它。 先举个例子感受一下千万级到底是什么数量级？现在的优步(Uber)，从媒体公布的信息看，它每天接单量平均在百万左右，假如每天有10个小时的服务时间，平均QPS只有30左右。 对于一个后台服务器，单机的平均
CDN 是 Content Delivery Network 的缩写，表示的是内容分发网络。CDN 的作用是把用户需要的内容分发到离用户最近的地方，这样可以是用户能够快熟获取所需要的内容。CDN 其实就是一种网络缓存技术，能够把一些相对稳定的资源放到距离最终用户较近的地方，一方面可以节省整个广域网的贷款消耗，另外一方面可以提升用户的访问速度，改进用户体验。我们一般会把静态的文件（图片、脚本、静态页面）放到 CDN 中
关于高防ddos服务器的使用以及需求，从以往的联众棋牌到目前发展迅猛的手机APP棋牌，越来越多的游戏行业都在使用高防ddos服务器系统，从2018年1月到11月，国内棋牌运营公司发展到了几百家。
如果是一台服务器很好管理，但是服务器多了，就很容易忘记，因此就需要一个监控的平台。serverstatus是一个开源的服务器监控系统，可以利用serverstatus可以自己搭建服务器监控平台，通过web页面同时检测多台服务器的流量、硬盘、内存等多个参数。今天就通过serverstatus中文版介绍下这个多服务器探针的用法。 项目在线演示 https://tz.cloudcpp.com 下面我们就开始部署自己的多服务器监控 搭建web环境 我使用的是宝塔面板安装 yum install -y wget
“ 2个月的开发时间，微信后台系统经历了从0到1的过程。从小步慢跑到快速成长，经历了平台化到走出国门，微信交出的这份优异答卷，解题思路是怎样的？本文由张文瑞，微信后台团队出品。 从无到有 2011.1.21 微信正式发布。这一天距离微信项目启动日约为2个月。就在这2个月里，微信从无到有，大家可能会好奇这期间微信后台做的最重要的事情是什么？ 我想应该是以下三件事： 1 确定了微信的消息模型 微信起初定位是一个通讯工具，作为通讯工具最核心的功能是收发消息。微信团队源于广硏团队，消息模型跟邮箱的邮件模型也很有渊
早期的网站为了节省成本一般会设计成集中式系统，应用程序、数据库等都部署在一台服务器上。 但随着业务的快速度发展，逐渐出现瓶颈，按一定原则**（应用拆分、服务拆分、数据拆分、应用解耦）**，向分布式系统转型，涉及到以下环节改造。 主要环节 业务拆分：将整个网站业务拆分成不同的应用，每个应用独立部署维护，应用之间通过RPC或消息队列通信。 集群化（应用服务器；基于RPC的微服务应用等） LVS负载均衡，负责将请求转发给不同业务集群 反向代理服务器，常用的如Nginx 应用服务器，servlet容器，如tomca
本文目录： 一、网关简介 二、网关的作用和价值 三、企业级API网关需要具备的条件 四、业界常用的API网关方案 五、如何设计一个好的企业级API网关产品 六、小结 一、网关简介 1.1 API网关背景介绍 API Gateway（APIGW / API 网关），顾名思义，是出现在系统边界上的一个面向API的、串行集中式的强管控服务，这里的边界是企业IT系统的边界，主要起到隔离外部访问与内部系统的作用。在微服务概念的流行之前，API网关的实体就已经诞生了，例如银行、证券等领域常见的前置机系统，它也是解决访问
早期的网站为了节省成本一般会设计成集中式系统，应用程序、数据库等都部署在一台服务器上。 但随着业务的快速度发展，逐渐出现瓶颈，按一定原则**（应用拆分、服务拆分、数据拆分、应用解耦）**，向分布式系统转型，涉及到以下环节改造。
蔡岳毅，携程酒店大数据高级研发经理，负责酒店数据智能平台研发，大数据技术创新工作。喜欢探索研究大数据的开源技术框架。
堡垒机是一个非常常用的企业网络信息安全的辅助工具，目前已经应用在了很多的企业的运维管理当中。之所以堡垒机如此流行是因为在互联网时代当中，信息安全的不确定性非常让人担忧，尤其是对于一些大规模公司的机密文件。在堡垒机的使用过程当中，又会遇到许许多多的问题，比如如何通过堡垒机登录多台服务器。
本文介绍了如何通过自动化运维平台实现IaaS层资源的统一管理，并针对金融云场景提供了详细的解决方案。
＂鹅厂网事＂由深圳市腾讯计算机系统有限公司技术工程事业群网络平台部运营，我们希望与业界各位志同道合的伙伴交流切磋最新的网络、服务器行业动态信息，同时分享腾讯在网络与服务器领域，规划、运营、研发、服务等层面的实战干货，期待与您的共同成长。 网络平台部以构建敏捷、弹性、低成本的业界领先海量互联网云计算服务平台，为支撑腾讯公司业务持续发展，为业务建立竞争优势、构建行业健康生态而持续贡献价值！ 导语 2015年春节，微信红包引爆全球，当各种惊人数据展示在大家面前的时候，从基础架构这个角度来看，必有一套完善的体系支
集群是一组协同工作的服务集合，用来提供比单一服务更稳定、更高效、更具扩展性的服务平台。
一、为什么需要hadoop？ 在数据量很大的情况下，单机的处理能力无法胜任，必须采用分布式集群的方式进行处理，而用分布式集群的方式处理数据，实现的复杂度呈级数增加。所以，在海量数据处理的需求下，一个通
之前分享过一篇元数据管理的文章 运维平台的建设思考-元数据管理，如果服务器不多，或者人也不多，基本都是按照下面的方式来管理。 比如下面是14台服务器，会在特定的服务器（比如中控）设置一个专门的路径来
双机热备就是使用互为备份的两台服务器共同执行同一服务，其中一台主机为工作机（Primary Server），另一台主机为备份机（Standby Server），保证系统不间断的运行。双机热备软件就是实现上述功能的软件产品。双机热备针对的是服务器的临时故障所做的一种备份技术，通过双机热备，来避免长时间的服务中断，保证系统长期、可靠的服务。
以电商系统为例，单体应用架构为 LNMP，这个时候只有 DEV 没有 OPS，DEV 就是全栈，就跟我们上大学玩的 demo 一样，项目开发好，找台服务器安装好环境，把 jar 包 scp 到远程服务器，放上去开启服务就可以。
关于高防服务器的使用以及需求，从以往的联众棋牌到目前发展迅猛的手机APP棋牌，越来越多的游戏行业都在使用高防服务器系统，从2018年1月到11月，国内棋牌运营公司发展到了几百家。
从2017年前开始，工作的原因接触到了NGS（高通量测序技术 High-throughput sequencing又称“下一代”测序技术"Next-generation" sequencing technology）技术和相关的生物信息学分析。
由于公司项目较多，所部署服务产生的日志也较多，以往查看服务器日志只能通过xshell、putty等SSH工具分别连接每台服务器，然后进入到各个服务器，执行Linux命令查看日志，这样可能会带来以下问题：
随着越来越多的企业将其重要业务迁移到云平台中，这也成为企业了解云计算如何运作的好时机。当他们这样做时很可能会感到，采用云计算可能会获得更多的价值。
所以，其实说起线上环境的部署，咱们好像都有点懂，但是又都不一定完全懂！网上的知识无穷无尽，但往往都是各司一职，对于普通同学，很难窥其全貌！
腾讯蓝鲸智云，作为业界领先的一套基于PaaS的技术解决方案，它提供了完善的前后台开发框架、调度引擎、公共组件等模块，帮助业务的产品和技术人员快速构建低成本、免运维的支撑工具和运营系统。 嘉为科技作为腾
【编者按】此文是根据魅族架构师于小波在msup和魅族联合举办的#魅族技术开放日#的演讲中的分享内容整理而成，于小波分享了魅族实时消息推送架构的其中遇到的坑和一些心得体会。 系统介绍 这个系统数据情况是
EasyCVR视频融合云服务支持多协议、多类型的设备接入，平台具备强大的视频汇聚与管理、数据分发、平台级联、设备管理等视频能力。在功能上，EasyCVR可提供视频监控直播、云端录像、云存储、录像检索与回看、智能告警等。
企业需要将自身数据、能力等作为开发平台向外开放，通常会以rest的方式向外提供，最好的例子就是淘宝开放平台、腾讯公司的QQ开发平台、微信开放平台。
主 题 ：INTO100沙龙 时间 ：2015年11月21日下午 地点 ：梦想加联合办公空间 分享人：卫向军（毕业于北京邮电大学，现任微博平台架构师，先后在微软、金山云、新浪微博从事技术研发工作，专注于系统架构设计、音视频通讯系统、分布式文件系统和数据挖掘等领域。） 架构以及我理解中架构的本质 在开始谈我对架构本质的理解之前，先谈谈对今天技术沙龙主题的个人见解，千万级规模的网站感觉数量级是非常大的，对这个数量级我们战略上 要重 视 它 ， 战术上又 要 藐 视 它。先举个例子感受一下千万级到底是什么数量
1、 Open API。企业需要将自身数据、能力等作为开发平台向外开放，通常会以rest的方式向外提供，最好的例子就是淘宝开放平台、腾讯公司的QQ开发平台、微信开放平台。Open API开放平台必然涉及到客户应用的接入、API权限的管理、调用次数管理等，必然会有一个统一的入口进行管理，这正是API网关可以发挥作用的时候。
现在是资源共享的时代，同样也是知识分享的时代，如果你觉得本文能学到知识，请把知识与别人分享。
Microsoft Web Farm Framework (WFF) 2.0 是微软开发的、基于IIS 7.x的小插件，能够帮助我们轻松实现Web网站的高性能、高可用性，用来在Web服务器群上提供和管理系统，从而使得集群的软件组件安装和配置成为可能，另外它还支持对ASP.NET应用的自动配置。WFF可以被集成到负载均衡系统，也可以通过配置来更新群里面的服务器，而且只需在某个时间停掉和更新一台服务器，而不需要停掉整个网站。如果想做基于IIS的反向代理，用WFF是一个不错的选择。 WFF包含了目前Web层面负载
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
