高并发负载均衡——网络协议原理

一、网络分层模型

软件工程项目学中有一个重要的思想就是分层解耦。OSI七层模型,TCP/IP四层(有时将数据链路层和物理层分开称为五层模型),都是为了更好的实现网络的互通。

应用层:网络服务于最终用户的一个接口,Tomcat、浏览器都属于这一层。

表示层:数据的表示、安全(加解密)、压缩等处理。

会话层:建立、管理、终止会话。

传输层:定义数据传输的协议端口号,以及流控和差错校验。

网络层:进行逻辑地址寻址,实现不同网络之间的路由。

数据链路层:建立逻辑连接、进行硬件地址寻址、差错校验等。

物理层:建立、维护、断开物理连接。

二、网络数据传输示例

通过Linux系统的Shell交互程序实现百度首页的请求。

首先进入当前shell程序的文件描述符定义路径,其中$$是当前命令解释程序(即Shell)。

0 1 2分别代表输入、输出和报错,这是所有交互程序都必须具备的接口。

使用exec命令,建立一个文件描述符8,代表一个socket连接:

此时,我们已经对www.baidu.com建立了一个TCP连接,紧接着,手写一个最简HTTP请求,输出到Socket中,并通过输入流从socket中取出响应,并输出。

最后关闭socket:

通过echo打印的 HTTP协议头字符串,就是在模拟应用层服务(如浏览器)的请求封装工作。但实际上,并不是应用层服务直接将请求发出,而是通过更下层的服务层层包装、寻址完成的。每一层都有对应的协议,上层服务只需要将请求内容按照协议组织好后就可以调用传输层服务,并通过网络接口发送出去。

应用层属于用户态,传输层以下是内核态。Java应用程序在请求网络时,就是像上面这样,获取一个socket对象,然后将封装好的信息放入其中。JVM如果想要建立一个网络连接,我们通过代码new Socket,但实际上底层都是native接口,是JVM去请求了系统调用,待操作系统内核跑完底层,返回一个建立成功的连接,之后才能执行下一步代码。在建立连接的时候,程序一定是会出现一定的阻塞。

三、传输层的TCP协议

TCP协议是传输层的重要协议,是面向连接的、可靠的通信标准。它通过三次握手、四次挥手机制实现安全可靠的连接。

3.1 三次握手

上图是三次握手的模型。

① 客户机首先发送第一次请求,主要参数有SYN、seq ;

② 服务器收到请求后,发送第二次请求给客户机,这实际上是上一次客户机请求的确认响应,但同时也是服务器对客户机的请求,参数主要有SYN、ACK、seq。

③ 客户机收到响应后,会再次确认这个响应,递增相关参数并响应回去。

经过了一次原始请求两次确认的通信之后,我们就已经可以认为这是一次明确、可靠的连接。

三趟数据包走完之后,双方才会在内存中开辟线程,开辟对象,开辟所有的描述符,建立相应的资源,而如果三次握手失败,这些资源是不会开辟的。

3.2 四次挥手

四次挥手断开连接,请求方发送断开请求,接收响应,但此时并未断开,需要由被动方主动发起允许断开的通知,方可完成断开操作。即先告知断开请求,再由被动方断开,最后双方释放资源,如端口号等。

整体通讯过程大致为:

三次握手-->数据传输-->四次分手

这个通讯过程是一个最小粒度,不可被分割。类似事务原子性。例如,在多负载系统中,多个实例不可以拆分同一个TCP连接,即端点与端点的所有数据请求、响应都不可以被任何负载技术所打散。

3.3 Linux下查看TCP 连接状态

netstat命令:

-n:numeric 直接使用ip地址,不通过域名服务器

-a:all 显示所有连线中的socket

-t:tcp

-p: 显示PID及对应程序

我们通过终端软件进行ssh登录后,就可以看到netstat的网络连接状态:

响应表格中,LISTEN表示正在监听,ESTABLISHED表示已经建立连接,所谓的Socket,就是Local Address和Foreign Address组成的一条唯一值。

其中有三条sshd程序,第一条sshd是父进程,处于LISTEN状态,一旦监听到连接请求,那么就会抛出一个线程用于建立Socket连接,后面两个sshd分别是远程终端的图形交互窗口sftp连接和命令行窗口ssh连接,Foreign Address中的192.168.1.1实际上就是Windows上的虚拟网卡,而port是随机的。

四、网络层

4.1 Linux网卡配置及IP下一跳机制

我们查看eth0网卡的配置信息,一般主要关注四个维度:

ip地址、掩码、网关、DNS服务地址。

查看路由表:

在很早的以前的网络拓扑当中,有一种模型,是每台主机都存储一个全局的网络拓扑,这种模型会随着互联网上的设备增多而失去可行性,于是就产生了现在的网络寻址机制,即下一跳机制。

所谓“下一跳”,就是当前IP地址到达目标IP的路径上临近的下一个IP地址。在路由过程中,数据包到达每个主机都会进行路由判定,并依次转发。这些转发的路径需要网络工程师来进行规划。下一跳机制可以极大的减少主机需要存储的IP地址信息,只需要记住同一网络的网关地址,就可以了。

4.2 通过ping理解下一跳机制

通过ping命令(基于ICMP协议)可以判断主机的连通状态,如下是ping百度首页:

那么ping程序是如何将数据包发送到遥远的百度服务器的呢?

首先,ping命令拿着目标地址(39.156.66.14)逐条与路由表中的掩码进行按位与运算,并且与Destination进行比较,这就是路由判定。如果目标地址与Destination记录的IP一致,就将数据包发给它。

上图中,经过路由判定,Destination=0.0.0.0符合要求,于是,我们就得到了下一跳地址192.168.1.2。而实际上不论什么IP,只要和掩码为0.0.0.0进行与运算,就都会得到0.0.0.0,因此在上面的路由表中192.168.1.2 就是默认网关。

互联网中的所有设备都会存储这样的路由表,只要具备转发能力,都会进行路由判定。一般的小型路由设备都会有一条默认的下一跳地址,而对于一些骨干网、城域网等大型网络环境,网络工程师可能会设置更多的下一跳条目,规划通信路由。

网关可以有多个,但是默认网关只有一个。同一网络通信是不需要路由设备的,只需要简单的交换机即可实现数据转发,只有不同网络的通信才需要下一跳地址。

五、数据链路层

当网络层的路由判定找到了下一跳地址,但数据包中的目标地址永远是最终将要发送到的IP地址,又如何将数据包发送到下一跳呢?

在IP数据包之外,又“包裹”了一层协议包。数据链路层同样存在一张表格,记录了MAC地址:

DNS是解释域名和IP地址的映射,arp协议会解释IP地址到MAC地址的映射。但前者是全网的,而arp是同一局域网内的。

经过arp的地址判定,IP数据包外面会“包裹”一个下一跳的MAC地址,这时整个数据包内部存在三个地址:下一跳的MAC地址、目标IP地址,以及目标端口号。

总结

TCP是重要的网络通信手段,三次握手建立的连接是一个可靠的Socket信道,这些信息可以通过 netstat -natp 命令查看。

IP数据包会记录目标地址的IP,传输过程中并不会改变。通过路由判定找到下一跳的网络IP地址,再通过数据链路层的 arp 协议找到下一跳IP的MAC地址,将其包裹在IP数据包外面,并通过物理层发送到下一跳。最终发送到IP数据包内的目标地址的目标端口上。

下一跳机制极大的减少了主机需要记录的通信IP数据,但同时,需要网络工程师对下一跳进行网络规划,开通相应策略,就像是搭建一个网络上的路由桥梁,连接各个网络之间的通信。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/559090.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Linux常用命令~~~

Linux常用命令~~~1. 查看当前的Linux服务器的运行级别 ‘who -r’ 和‘runlevel’命令可以查看当前linux服务器运行级别 2. 查看Linux的默认网关 ‘route -n’和‘nestat - nr’可以查看默认网关,也可以显示当前路由表。 3. 查看bond0状态:cat /pro/net/…

文件存储

最近正在写有关文件操作的程序,搞得我也是焦头烂额。业务很简单:前台用户需要选择一个jar包然后上传到服务器(localhost)然后由后台的Java程序进行指定目录的存储,然后将文件路径转存到mongodb中。 但是,前…

2021年高考理综单科成绩查询,2021年高考总分是多少 2021年高考各科满分多少分...

高考总分不同地区可能会有一些小差异,不过大体上是相同的,由于每年全国各地高考的政策和说明都会有一些变化,所以高考总分也可能会有改变,及时了解这些变化是每一个参加高考的学子都必须要注意的。小编整理了《2021高考总分是多少…

javaweb通过接口来实现多个文件压缩和下载(包括单文件下载,多文件批量下载)

程序员在做web等项目的时候,往往都需要添加文件上传、下载、删除的功能,有时是单文件,有时多文件批量 操作,而这些功能的代码程序员可以自己收藏起来当成工具使用,这样,程序员在进行程序设计的时候就会事半…

html cookie传参,页面间固定参数,通过cookie传值的实现方法

最后在做的页面,比如用户数据(用户头像,名称,年龄)这些信息,因为大部分页面都要用,之前是通过url地址传,另一页面接收。考虑到这样做会让url过长,因此,尝试使用cookie,把…

传统form表单提交方式的文件上传与文件存储

引言 时隔一天,上一篇文章《文件存储》刚一停笔,今天上午就解决了困扰我已久的文件上传问题。 站在一个已实现功能的角度来重新看待这个文件上传的业务:编辑页面选择jar包,然后通过form表单提交,上传到后台程序&…

eclipse项目一直显示有错,但是一直找不到错误在哪里

eclipse项目一直显示有错,但是一直找不到错误在哪里 这天在写项目的时候碰到了这么个问题,项目上一直提示着红叉,但不管是文件里还是java buildpath里都找不到报错,很纳闷了~最后终于给我找到方法了~如下: 类似于下面这…

微型计算机硬件性能取决于什么,微型计算机硬件系统的性能主要取决于

大家好,我是时间财富网智能客服时间君,上述问题将由我为大家进行解答。微型计算机硬件系统的性能主要取决于微处理器。微处理器能完成取指令、执行指令,以及与外界存储器和逻辑部件交换信息等操作,是微型计算机的运算控制部分。它可与存储器和外围电路芯…

LeetCode(#1)————Two Sum

问题描述 给定一个整数数组 nums 和一个目标值 target,请你在该数组中找出和为目标值的那 两个 整数,并返回他们的数组下标。 你可以假设每种输入只会对应一个答案。但是,你不能重复利用这个数组中同样的元素。 Given nums [2, 7, 11, 15…

Log4j文件配置教程大全

Log4j文件配置教程大全~Log4J的配置文件(Configuration File)就是用来设置记录器的级别、存放器和布局的,它可接keyvalue格式的设置或xml格式的设置信息。通过配置,可以创建出Log4J的运行环境。1, 整体框架介绍:#配置根Logger log…

微型计算机和接口技术考题,微型计算机接口技术以及应用考题

一、单项选择题1.通常在外设接口中,往往有( )端口才能满足和协调外设工作要求。A.数据 B.数据、控制 C.数据、控制、状态 D.控制、缓冲2.独立I/O端口编址方式中,端口地址…

Java本地文件操作

概述:Java本地文件操作,涉及到文件/文件夹的创建,文件/文件夹属性的读取与设置,文件/文件夹的重命名,目录结构的遍历,以及文件内容的读取与写入。 File属于java.io.File。 ---在Eclipse的大纲视图界面&…

GitBlit使用安装教程~

GitBlit使用安装教程~GitBlit是什么?Gitblit 是一个纯 Java 库用来管理、查看和处理 Git 资料库.相当于 Git 的 Java 管理工具.git的管家,通俗点来说就是一个相当于SVN的工具,用于多个人共同开发同一个项目,共用资源的目的。 下载与安装: 1. …

怎么用计算机名称共享打印机设置,如何共享打印机设置教程

打印机怎么共享,算是老问题了,但很多时候分享都是老系统的,这里分享WIN7系统和win10系统两种系统的打印机如何共享的设置教程。一、WIN7设共享准备工作:添加打印机之前我们要知道主机的一些信息,如计算机名、工作组、共…

Java项目转变为Java Web项目

1、找到项目工作空间目录&#xff0c;打开.project文件&#xff0c;并修改文件&#xff0c; 修改如下&#xff1a; 找到&#xff1a;<natures> </natures>代码段&#xff0c;在代码段中加入如下内容并保存&#xff1a; <nature>org.eclipse.wst.common.proje…

计算机网络学习总结

计算机网络学习总结~1. OSI&#xff0c;TCP/IP,五层协议的体系结构&#xff0c;以及各层协议&#xff1a; OSI 分层&#xff1a;7层&#xff0c;物理层&#xff0c;数据链路层&#xff0c;网络层&#xff0c;传输层&#xff0c;会话层&#xff0c;表示层&#xff0c;应用层 TC…

计算机网络实验报告校园网,校园网规划与设计实验报告.docx

校园网规划与设计实验报告校园网的规划与设计实验报告篇一&#xff1a;校园网设计与规划报告(计算机网络大实验)  《计算机网络》实践报告  校园网设计与规划   专 业&#xff1a; 软件工程   班 级&#xff1a; 软件0901  姓 名&#xff1a; 李双双  学 号:  指…

Linux(Ubuntu)下设置开机自启shell脚本执行Java程序jar包

一、建立脚本文件&#xff1a; 二、设置权限 三、将脚本文件放到启动目录下 四、更新优先级 cd /etc/init.d sudo update-rc.d startm.sh defaults 90 至此&#xff0c;开机启动已经完成&#xff0c;我们可以通过reboot重启linux&#xff0c;来查看jar包是否已经启动成功。而…

鼠标键盘与计算机无法连接,只有三个步骤可以轻松解决无法识别计算机,键盘和鼠标的问题!...

对于大多数人来说&#xff0c;无论是笔记本电脑还是台式机&#xff0c;浏览网络&#xff0c;聊天&#xff0c;玩游戏和办公室工作都像进食和喝水一样容易。但是了解计算机并不意味着了解计算机。有时&#xff0c;一个非常常见的小问题“键盘和鼠标无法响应”常常使许多朋友感到…

git学习入门~~~

创建版本库&#xff08;又名仓库&#xff0c;repository&#xff09;&#xff0c;可以理解为一个仓库&#xff0c;这个目录里面的所有文件都可以被Git管理起来&#xff0c;每个文件的修改、删除&#xff0c;Git都能跟踪&#xff0c;以便任何时刻都可以追踪历史&#xff0c;或者…