《The Google File System》论文阅读笔记——GFS设计原理

作者:taotaotheripper     分类:云技术     标签:     时间:2014.06.06     浏览:75     评论:0

一、设计预期 设计预期往往针对系统的应用场景,是系统在不同选择间做balance的重要依据,对于理解GFS在系统设计时为何做出现有的决策至关重要。所以我们应重点关注: 失效是常态 主要针对大文件 读操作:大规模流式读取、小规模随机读取 写操作:大规模顺序追加写,写入后很少修改 高效明确定义的并行追加写 稳定高效地网络带宽 二、整体设计 1、系统架构 GFS主要由以下三个系统模块组成: Master:管理元数据、整体协调系统活动 ChunkServer:存储维护数据块(Chunk),读写文件数据 Client:向 [...]   阅读全文


分享“12306 P2P平台”创业Idea

作者:guozili@163.com     分类:云技术     标签:     时间:2014.06.06     浏览:73     评论:0

  结合云平台抢票,社区,P2P等性质,实施供求抢票平台,能有效提高和整合抢票市场,抢票优势以杜绝黄牛,给散户提供更有利的抢票途径。本在11月计划实施,后去搞比特币,故分享摘要集思广益。 背景: 360,百度都做了云平台抢票,但是实际效果很差,因为服务器集群都是同一线路和IP,不能做到不同CDN第一时间刷出票; 贴吧等社区到处都是有偿求抢票,空闲帮抢票的信息,此类信息容易被封,而且交易不透明,不方便,更容易被黄牛利用; fishlee.net此神器只是单机版,目前问题多多,实际效果也要看人品和运气。 Idea:实现12306 p2p平台 类似 [...]   阅读全文


Bigtable阶段性总结(版本1)

作者:燃烧吧安菲拉尔     分类:云技术     标签:     时间:2014.06.06     浏览:81     评论:0

Bigtable的角色:为大规模的结构化数据提供高效的存储、管理与查询。 Bigtable的针对性: 大规模数据需要大规模集群支持,带来了存储、管理、查询、容错上的复杂性。 关系型数据库在数据规模较大时复杂性迅速上升,效率大幅下降。 Bigtable的特点: 只支持简单的数据模型,所有key和value都是字符串,具体含义由用户自行解释。 运行时可单独为每行调整布局。 根据key排序,且相近的key处于相近的位置,用户可由此推断局部性。 底层存储平台为GFS,无须担心数据的存储问题。用户也可指定将数据存储在内存中。 由Chubby提供分布式环 [...]   阅读全文


APT攻击将向云计算平台聚焦

作者:功夫 熊猫     分类:云技术     标签:     时间:2014.06.06     浏览:76     评论:0

APT攻击作为一种高效、精确的网络攻击方式,在近几年被频繁用于各种网络攻击事件之中,并迅速成为企业信息安全最大的威胁之一。 近日,飞塔中国首席技术顾问X在谈及APT攻击时表示,随着云计算的不断发展普及,APT攻击将向云计算平台聚焦:“数据和计算越来越集中化,以往针对个人的分散式攻击变得越来越没有效率,黑客一定会聚焦于云计算平台,施以专注、专业的APT攻击,以期获取最大量、最核心的机密数据,从而造成最大的破坏,或获得最大的利益。” X认为,APT攻击具有较强的隐蔽性、专业性、持续性,黑客通过社交工程、恶意代码攻击、漏洞攻击、0day攻击、数据泄露等方式,攻击存放有大量 [...]   阅读全文


网络结构设计——负载均衡学习笔记(一)

作者:我爱物联网     分类:云技术     标签:     时间:2014.06.06     浏览:89     评论:0

  我自己用自己理解的一句话解释一下服务器负载均衡和服务器冗余技术的差别,这两个技术都是解决网站在大访问量的情况下仍然以快速度访问网站的技术(不喜勿喷)。 负载均衡            外部网络访问网页,路由器将访问量分别转至三台服务器上,即将访问量分担到不同的服务器设备上。 冗余技术            主服务器+备份服务器=服务器集群,每次访问都是访问的服务器集群上的主服务器,内容更改的话与备份服务器同步,当一个服务器集群的主服务器崩溃 [...]   阅读全文


网络结构设计——负载均衡之LVS学习笔记(二)

作者:我爱物联网     分类:云技术     标签:     时间:2014.06.06     浏览:81     评论:0

  LVS按个人理解的说就是将一台Linux服务器当作路由器等功能的技术。LVS---Linux虚拟服务器。   LVS实现了三种IP负载均衡技术VS/NAT、VS/TUN、VS/DR。   今天简单分享一下我在学习LVS的NAT技术的一些心得。 背景      外部网络      Windows   LVS        Centos   WEB Server 1   Centos   WEB Server 2   Centos 配置   Windows VM1网卡设置        LVS 左 [...]   阅读全文


网络结构设计——负载均衡之LVS学习笔记(三)

作者:我爱物联网     分类:云技术     标签:     时间:2014.06.06     浏览:71     评论:0

总结   浏览器访问时,访问的是LVS服务器的200.168.10.10这个IP地址,LVS服务器将请求隧道封装后分别轮回发给两台WEB服务器,然后直接由WEB服务器将请求返回给发送的外部网络上的主机,这个过程没有经过LVS服务器的处理了,这样,相对于NAT技术,便没有了LVS服务器访问量限制的瓶颈了。但是由图可以看到,WEB服务器也是挂在公网上的,而不是私网。   这样做可以减少大访问量的时候WEB服务器的压力,只是挂在公网上的服务器会比较多。 转载请注明出处:http://www.cnblogs.c [...]   阅读全文


网络结构设计——负载均衡之LVS学习笔记(四)

作者:我爱物联网     分类:云技术     标签:     时间:2014.06.06     浏览:78     评论:0

  LVS按个人理解的说就是将一台Linux服务器当作路由器等功能的技术。LVS---Linux虚拟服务器。   LVS实现了三种IP负载均衡技术VS/NAT、VS/TUN、VS/DR。   今天简单分享一下我在学习LVS的DR技术的一些心得。 背景   外部网络      Windows   LVS        Centos   WEB Server 1   Centos   WEB Server 2   Centos 配置    [...]   阅读全文


Windows Azure Platform 系列文章目录

作者:逍遙先生     分类:云技术     标签:     时间:2014.06.06     浏览:64     评论:0

Windows Azure Platform (一) 云计算的出现 Windows Azure Platform (二) 云计算的分类和服务层次 Windows Azure Platform (三) 云计算的特点 Windows Azure Platform (四) Windows Azure架构 Windows Azure Platform (五) Windows Azure Platform Windows Azure Platform (六) Windows Azure应用程序运行环境 Windows Azure Platform (七) Windows Azure Gues [...]   阅读全文


Squid普通代理&&透明代理&&反向代理学习

作者:我爱物联网     分类:云技术     标签:     时间:2014.06.06     浏览:89     评论:0

普通代理 背景 总结 普通代理只是个很简单的代理,如果是IT人员的话,知道怎么弄,但是对于非IT人员的话,很麻烦,可能要跟着教程走。所以这个不是很方便。所以就有了透明代理,这样无需在IE上设置便可以直接通过代理上网。至于反向代理,主要是为了提高速度而设置的。就像一个公司里面的员工,都通过这个代理访问出去的,第一个员工访问了腾讯的主页,因为他是全公司的第一个去访问的腾讯,那么网页返回的时间就比较长,同时反向代理把腾讯网页上的一些静态信息保存在自己主机上,那么第二次访问,那些静态的东西,比如图片、FLASH等就直接从反向代理服务器中取就OK了,速度就快了许多,上面的图也可以看出来。 [...]   阅读全文


关于我

浅墨,80后程序猿,不善于前端,只会做后台。他也是地地道道的重庆崽儿,目前坐标广州。他和许多IT男一样不擅表达,也和许多摄影师一样喜欢文艺,喜欢旅行。只想记录生活写给未来的自己。

近期文章

文章归档

  1. 2015年08月 (17)
  2. 2014年06月 (6695)
  3. 2014年05月 (24)
  4. 2014年04月 (40)
  5. 2013年09月 (1)
  6. 2013年08月 (1)
  7. 2013年07月 (7)
  8. 2013年06月 (20)
  9. 2013年05月 (24)
  10. 2013年04月 (21)
  11. 2013年01月 (5)
  12. 2012年01月 (9)

标签

  1. struts2
  2. ssh
  3. wpf
  4. spring3
  5. hibernate4
  6. 数据库
  7. 串口
  8. sqlserver
  9. url重写
  10. windows应用商店应用
  11. 委托
  12. 匿名方法
  13. php
  14. 域名
  15. mysql
  16. iis
  17. Swift

随机推荐