2011架构师大会心得

Wesley13
• 阅读 499

1、架构应该是对开发者是透明的
2、在架构中,存储是难度最大的
3、百度贴吧是如何测试的,采用轻量型解决方案,支持开发者快速
4、视频存储非常适合key-value形式
5、运维自动化,不需要改每台服务器的设置
6、增加流量能力的,可以利用多网卡
7、有些领域的流量会突发增加10倍,甚至更多,这时候需要考虑加锁来缓冲一下,防止cache实效,都去访问后台db
8、淘宝,一致性都是最终一致性
9、水平架构,加机器即可
10、Hbase类似于svn,有版本控制
11、Hbase类似于Membase
12、Membase集中了Hbase和cassendra的优点
13、cassendra vs    Hbase
    从零开发,      要求数据一致性,不过没有事务的概念,每一行是具备的
    快速开发
    快速部署
    简单的安全认证
14、百度自动化运维
         任务调度,数据传输,资源定位,百度消除了crontab,统一管理
15、cdn可以做域名解析
16、lvs中的DR类似于路由,需要明白lvs的代码和原理,特别是ip隧道,ip包是如何返回lvs机器的?
        In LVS-NAT, the default gateway for the real server is normally an IP address on the Director (the DIP),
        so the reply packet is routed through the director.
        ip隧道不走director
17、MongoDB
    类sql,B树索引,内存消耗很大,很费内存,没有join操作,保证一段时间后数据一致性
    面向文档的存储,放弃事务,json document,如果schema很乱的话,索引会实效
    商业公司维护
18、tcp优化
    减少数据过度重发,也是优化
19、DNS,也是采用了负载均衡,有的也采用了memcached
20、DNS有可能返回给电信用户的地址是网通用户的,多加一层就可以解决此问题

21、iptables,对各个协议作统计
22、ippip按包处理
23、DPI,DeepPacketInspection
24、lvs,x86,无法利用多核优势,性能差
25、内核开发,调试非常困难,需要看寄存器,汇编代码, 如果不能重现,几乎找不到解决方案
26、服务器优化技术
      tcp连接复用
      http内存缓存
      智能DNS
      tcp 单边加速,正常网络,0.1%丢包率,只重传丢的包,会加速
      
27、网络拥塞是无法避免的,可以做协议栈的定制优化,在无线环境下,丢包并不一定是拥塞,网络会抖动
28、虚拟ip只能是同网段

29、局部输出缓存,nginx ESI module

30、明年我也有能力上去讲

点赞
收藏
评论区
推荐文章
blmius blmius
3年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
待兔 待兔
4个月前
手写Java HashMap源码
HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程22
Jacquelyn38 Jacquelyn38
3年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
Stella981 Stella981
3年前
KVM调整cpu和内存
一.修改kvm虚拟机的配置1、virsheditcentos7找到“memory”和“vcpu”标签,将<namecentos7</name<uuid2220a6d1a36a4fbb8523e078b3dfe795</uuid
Easter79 Easter79
3年前
Twitter的分布式自增ID算法snowflake (Java版)
概述分布式系统中,有一些需要使用全局唯一ID的场景,这种时候为了防止ID冲突可以使用36位的UUID,但是UUID有一些缺点,首先他相对比较长,另外UUID一般是无序的。有些时候我们希望能使用一种简单一些的ID,并且希望ID能够按照时间有序生成。而twitter的snowflake解决了这种需求,最初Twitter把存储系统从MySQL迁移
Wesley13 Wesley13
3年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Stella981 Stella981
3年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Stella981 Stella981
3年前
Docker 部署SpringBoot项目不香吗?
  公众号改版后文章乱序推荐,希望你可以点击上方“Java进阶架构师”,点击右上角,将我们设为★“星标”!这样才不会错过每日进阶架构文章呀。  !(http://dingyue.ws.126.net/2020/0920/b00fbfc7j00qgy5xy002kd200qo00hsg00it00cj.jpg)  2
Python进阶者 Python进阶者
10个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这