高并发负载均衡——网络协议原理

一、网络分层模型

软件工程项目学中有一个重要的思想就是分层解耦。OSI七层模型,TCP/IP四层(有时将数据链路层和物理层分开称为五层模型),都是为了更好的实现网络的互通。

应用层:网络服务于最终用户的一个接口,Tomcat、浏览器都属于这一层。

表示层:数据的表示、安全(加解密)、压缩等处理。

会话层:建立、管理、终止会话。

传输层:定义数据传输的协议端口号,以及流控和差错校验。

网络层:进行逻辑地址寻址,实现不同网络之间的路由。

数据链路层:建立逻辑连接、进行硬件地址寻址、差错校验等。

物理层:建立、维护、断开物理连接。

二、网络数据传输示例

通过Linux系统的Shell交互程序实现百度首页的请求。

首先进入当前shell程序的文件描述符定义路径,其中$$是当前命令解释程序(即Shell)。

0 1 2分别代表输入、输出和报错,这是所有交互程序都必须具备的接口。

使用exec命令,建立一个文件描述符8,代表一个socket连接:

此时,我们已经对www.baidu.com建立了一个TCP连接,紧接着,手写一个最简HTTP请求,输出到Socket中,并通过输入流从socket中取出响应,并输出。

最后关闭socket:

通过echo打印的 HTTP协议头字符串,就是在模拟应用层服务(如浏览器)的请求封装工作。但实际上,并不是应用层服务直接将请求发出,而是通过更下层的服务层层包装、寻址完成的。每一层都有对应的协议,上层服务只需要将请求内容按照协议组织好后就可以调用传输层服务,并通过网络接口发送出去。

应用层属于用户态,传输层以下是内核态。Java应用程序在请求网络时,就是像上面这样,获取一个socket对象,然后将封装好的信息放入其中。JVM如果想要建立一个网络连接,我们通过代码new Socket,但实际上底层都是native接口,是JVM去请求了系统调用,待操作系统内核跑完底层,返回一个建立成功的连接,之后才能执行下一步代码。在建立连接的时候,程序一定是会出现一定的阻塞。

三、传输层的TCP协议

TCP协议是传输层的重要协议,是面向连接的、可靠的通信标准。它通过三次握手、四次挥手机制实现安全可靠的连接。

3.1 三次握手

上图是三次握手的模型。

① 客户机首先发送第一次请求,主要参数有SYN、seq ;

② 服务器收到请求后,发送第二次请求给客户机,这实际上是上一次客户机请求的确认响应,但同时也是服务器对客户机的请求,参数主要有SYN、ACK、seq。

③ 客户机收到响应后,会再次确认这个响应,递增相关参数并响应回去。

经过了一次原始请求两次确认的通信之后,我们就已经可以认为这是一次明确、可靠的连接。

三趟数据包走完之后,双方才会在内存中开辟线程,开辟对象,开辟所有的描述符,建立相应的资源,而如果三次握手失败,这些资源是不会开辟的。

3.2 四次挥手

四次挥手断开连接,请求方发送断开请求,接收响应,但此时并未断开,需要由被动方主动发起允许断开的通知,方可完成断开操作。即先告知断开请求,再由被动方断开,最后双方释放资源,如端口号等。

整体通讯过程大致为:

三次握手-->数据传输-->四次分手

这个通讯过程是一个最小粒度,不可被分割。类似事务原子性。例如,在多负载系统中,多个实例不可以拆分同一个TCP连接,即端点与端点的所有数据请求、响应都不可以被任何负载技术所打散。

3.3 Linux下查看TCP 连接状态

netstat命令:

-n:numeric 直接使用ip地址,不通过域名服务器

-a:all 显示所有连线中的socket

-t:tcp

-p: 显示PID及对应程序

我们通过终端软件进行ssh登录后,就可以看到netstat的网络连接状态:

响应表格中,LISTEN表示正在监听,ESTABLISHED表示已经建立连接,所谓的Socket,就是Local Address和Foreign Address组成的一条唯一值。

其中有三条sshd程序,第一条sshd是父进程,处于LISTEN状态,一旦监听到连接请求,那么就会抛出一个线程用于建立Socket连接,后面两个sshd分别是远程终端的图形交互窗口sftp连接和命令行窗口ssh连接,Foreign Address中的192.168.1.1实际上就是Windows上的虚拟网卡,而port是随机的。

四、网络层

4.1 Linux网卡配置及IP下一跳机制

我们查看eth0网卡的配置信息,一般主要关注四个维度:

ip地址、掩码、网关、DNS服务地址。

查看路由表:

在很早的以前的网络拓扑当中,有一种模型,是每台主机都存储一个全局的网络拓扑,这种模型会随着互联网上的设备增多而失去可行性,于是就产生了现在的网络寻址机制,即下一跳机制。

所谓“下一跳”,就是当前IP地址到达目标IP的路径上临近的下一个IP地址。在路由过程中,数据包到达每个主机都会进行路由判定,并依次转发。这些转发的路径需要网络工程师来进行规划。下一跳机制可以极大的减少主机需要存储的IP地址信息,只需要记住同一网络的网关地址,就可以了。

4.2 通过ping理解下一跳机制

通过ping命令(基于ICMP协议)可以判断主机的连通状态,如下是ping百度首页:

那么ping程序是如何将数据包发送到遥远的百度服务器的呢?

首先,ping命令拿着目标地址(39.156.66.14)逐条与路由表中的掩码进行按位与运算,并且与Destination进行比较,这就是路由判定。如果目标地址与Destination记录的IP一致,就将数据包发给它。

上图中,经过路由判定,Destination=0.0.0.0符合要求,于是,我们就得到了下一跳地址192.168.1.2。而实际上不论什么IP,只要和掩码为0.0.0.0进行与运算,就都会得到0.0.0.0,因此在上面的路由表中192.168.1.2 就是默认网关。

互联网中的所有设备都会存储这样的路由表,只要具备转发能力,都会进行路由判定。一般的小型路由设备都会有一条默认的下一跳地址,而对于一些骨干网、城域网等大型网络环境,网络工程师可能会设置更多的下一跳条目,规划通信路由。

网关可以有多个,但是默认网关只有一个。同一网络通信是不需要路由设备的,只需要简单的交换机即可实现数据转发,只有不同网络的通信才需要下一跳地址。

五、数据链路层

当网络层的路由判定找到了下一跳地址,但数据包中的目标地址永远是最终将要发送到的IP地址,又如何将数据包发送到下一跳呢?

在IP数据包之外,又“包裹”了一层协议包。数据链路层同样存在一张表格,记录了MAC地址:

DNS是解释域名和IP地址的映射,arp协议会解释IP地址到MAC地址的映射。但前者是全网的,而arp是同一局域网内的。

经过arp的地址判定,IP数据包外面会“包裹”一个下一跳的MAC地址,这时整个数据包内部存在三个地址:下一跳的MAC地址、目标IP地址,以及目标端口号。

总结

TCP是重要的网络通信手段,三次握手建立的连接是一个可靠的Socket信道,这些信息可以通过 netstat -natp 命令查看。

IP数据包会记录目标地址的IP,传输过程中并不会改变。通过路由判定找到下一跳的网络IP地址,再通过数据链路层的 arp 协议找到下一跳IP的MAC地址,将其包裹在IP数据包外面,并通过物理层发送到下一跳。最终发送到IP数据包内的目标地址的目标端口上。

下一跳机制极大的减少了主机需要记录的通信IP数据,但同时,需要网络工程师对下一跳进行网络规划,开通相应策略,就像是搭建一个网络上的路由桥梁,连接各个网络之间的通信。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/559090.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

文件存储

最近正在写有关文件操作的程序,搞得我也是焦头烂额。业务很简单:前台用户需要选择一个jar包然后上传到服务器(localhost)然后由后台的Java程序进行指定目录的存储,然后将文件路径转存到mongodb中。 但是,前…

2021年高考理综单科成绩查询,2021年高考总分是多少 2021年高考各科满分多少分...

高考总分不同地区可能会有一些小差异,不过大体上是相同的,由于每年全国各地高考的政策和说明都会有一些变化,所以高考总分也可能会有改变,及时了解这些变化是每一个参加高考的学子都必须要注意的。小编整理了《2021高考总分是多少…

eclipse项目一直显示有错,但是一直找不到错误在哪里

eclipse项目一直显示有错,但是一直找不到错误在哪里 这天在写项目的时候碰到了这么个问题,项目上一直提示着红叉,但不管是文件里还是java buildpath里都找不到报错,很纳闷了~最后终于给我找到方法了~如下: 类似于下面这…

GitBlit使用安装教程~

GitBlit使用安装教程~GitBlit是什么?Gitblit 是一个纯 Java 库用来管理、查看和处理 Git 资料库.相当于 Git 的 Java 管理工具.git的管家,通俗点来说就是一个相当于SVN的工具,用于多个人共同开发同一个项目,共用资源的目的。 下载与安装: 1. …

怎么用计算机名称共享打印机设置,如何共享打印机设置教程

打印机怎么共享,算是老问题了,但很多时候分享都是老系统的,这里分享WIN7系统和win10系统两种系统的打印机如何共享的设置教程。一、WIN7设共享准备工作:添加打印机之前我们要知道主机的一些信息,如计算机名、工作组、共…

计算机网络学习总结

计算机网络学习总结~1. OSI,TCP/IP,五层协议的体系结构,以及各层协议: OSI 分层:7层,物理层,数据链路层,网络层,传输层,会话层,表示层,应用层 TC…

Linux(Ubuntu)下设置开机自启shell脚本执行Java程序jar包

一、建立脚本文件: 二、设置权限 三、将脚本文件放到启动目录下 四、更新优先级 cd /etc/init.d sudo update-rc.d startm.sh defaults 90 至此,开机启动已经完成,我们可以通过reboot重启linux,来查看jar包是否已经启动成功。而…

鼠标键盘与计算机无法连接,只有三个步骤可以轻松解决无法识别计算机,键盘和鼠标的问题!...

对于大多数人来说,无论是笔记本电脑还是台式机,浏览网络,聊天,玩游戏和办公室工作都像进食和喝水一样容易。但是了解计算机并不意味着了解计算机。有时,一个非常常见的小问题“键盘和鼠标无法响应”常常使许多朋友感到…

git学习入门~~~

创建版本库(又名仓库,repository),可以理解为一个仓库,这个目录里面的所有文件都可以被Git管理起来,每个文件的修改、删除,Git都能跟踪,以便任何时刻都可以追踪历史,或者…

兰州交通大学计算机科学与技术排名,兰州交通大学怎么样 全国排名是多少

兰州交通大学,原名兰州铁道学院,是我国第三所铁路院校。兰州交通大学学科特色鲜明、门类齐全,是中央部委投资省部共建重点大学,下面小编为大家详细介绍,供大家参考。兰州交通大学排名2020年兰州交通大学全国排名第166名…

JVM 运行时数据区域总结

引言 本博客总结自《深入理解 Java 虚拟机》,第二章。 一、概述 Java 虚拟机在执行 Java 程序的时候会把它所管理的内存划分为若干个不同的数据区域。 记忆口诀:两栈一计数,一堆一方法。 解释:第一句两栈分别是VM栈和本地方法栈…

一篇博客读懂设计模式之---单例模式

一篇博客读懂设计模式之---单例模式 一。 单例模式 单例对象(Singleton)是一种常用的设计模式。在Java应用中,单例对象能保证在一个JVM中,该对象只有一个实例存在。这样的模式有几个好处: 1、某些类创建比较频繁&…

计算机会计知识竞赛,全国企业会计信息化知识竞赛试题及答案

全国企业会计信息化知识竞赛试题及答案第 1 题(单选)下列各项中,符合会计软件不可逆的记账功能要求的是( A )A.记账标记不得通过任何操作予以取消B.不可以用红字凭证更正记账错误C.可以删除已经记账的记账凭证D.可以进行反记账第 2 题(单选)下列关于信息系统自动生成…

使用缓冲字节流:BufferedInputStream与BufferedOutputStream读写数据

功能逻辑:将一个视频文件通过缓冲字节输入流进行读取,然后再通过缓冲字节输出流将其重新拷贝输出。public static void main(String[] args) {try {FileInputStream fis new FileInputStream("Rick_and_Morty.mkv");//第二个参数指定了缓冲区…

多媒体计算机技术的主要特点,多媒体技术主要特点?

满意答案01and032013.11.24采纳率:41% 等级:11已帮助:5479人多媒体技术有以下几个主要特点:(1)集成性 能够对信息进行多通道统一获取、存储、组织与合成。(2)控制性 多媒体技术是以计算机为中心,综合处理和控制多媒…

java io流的学习总结~~

java io流的学习总结~~流的概念和作用流是一组有顺序的,有起点和终点的字节集合,是对数据传输的总称或抽象。即数据在两设备间的传输称为流,流的本质是数据传输,根据数据传输特性将流抽象为各种类,方便更直观的进行数据…

计算机组成原理第二章数据,计算机组成原理第二章数据在计算机中的表示

计算机组成原理第二章数据在计算机中的表示 (91页)本资源提供全文预览,点击全文预览即可全文预览,如果喜欢文档就下载吧,查找使用更方便哦!14.90 积分第二章 数据在计算机中的表示 n 概述 n 字符编码 n 中文编码 n 逻辑数据 n 数值数据 n 校验…

史上最全的ubuntu服务器搭建环境教程~~~

ubuntu服务器搭建环境~~~ 1. 先安装xshell:远程服务器连接(取代直接在浏览器 上 访问) 2. 安装xftp(ftp文件传输)直接双击红色圈圈即可3. 安装mysql数据库:指令:sudo apt-get updatesudo apt-ge…

Apache工具包方法——Hex.encodeHexString(byte[] data)源码浅析

【2019-07-02 注:标题是Hex.encodeHexString(byte[] data) 的源码解析,但在实际测试过程中,改了方法名称,内部实现还是完全一样的。】 最近正在研究加密的相关方法和思想,有时候会用到byte类型的数组密钥或者密文&…

计算机考试400,400作文:电脑考试

400作文:电脑考试今天下午第三节课是大家最爱的电脑课,第三节课的上课铃还没敲响,大家就早早来到电脑室门口,拍好整齐的队伍,等待电脑金老师来带领我们进电脑室。终于,金老师面带微笑从办公室走到了我们这边…