15分钟从零开始搭建支持10w+用户的生产环境(四)

上一篇文章,介绍了这个架构中,WebServer的选择,以及整个架构中扩展时的思路。

原文地址:15分钟从零开始搭建支持10w+用户的生产环境(三)

五、架构实践

前边用了三篇文章,详细介绍了这个架构的各个部分的选择以及安装。

这篇文章,我会用一个Demo项目,从开发到部署,包括MongoDB数据的访问。用这种方式过一遍这个架构。

Demo项目,我们用Dotnet Core开发。我们选择最新版的Dotnet Core 3.1做为系统的主框架。

开发环境用MacOS + VS Code,生产环境用云服务器。

第一步:环境检查和搭建

  1. 先看看各个环境的版本情况

生产环境:

$ cat /proc/version
Linux version 4.9.0-12-amd64 (debian-kernel@lists.debian.org) (gcc version 6.3.0 20170516 (Debian 6.3.0-18+deb9u1) ) #1 SMP Debian 4.9.210-1 (2020-01-20)$ lsb_release -a
No LSB modules are available.
Distributor ID:    Debian
Description:    Debian GNU/Linux 9.12 (stretch)
Release:    9.12
Codename:    stretch

开发环境:

$ cat /System/Library/CoreServices/SystemVersion.plist
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE plist PUBLIC "-//Apple//DTD PLIST 1.0//EN" "http://www.apple.com/DTDs/PropertyList-1.0.dtd">
<plist version="1.0">
<dict><key>ProductBuildVersion</key><string>19E287</string><key>ProductCopyright</key><string>1983-2020 Apple Inc.</string><key>ProductName</key><string>Mac OS X</string><key>ProductUserVisibleVersion</key><string>10.15.4</string><key>ProductVersion</key><string>10.15.4</string><key>iOSSupportVersion</key><string>13.4</string>
</dict>
</plist>
  1. 安装Dotnet Core 3.1

Dotnet Core官方下载地址:https://aka.ms/dotnet-download

Mac上边是以前装好的,看一下:

$ dotnet --info
.NET Core SDK (reflecting any global.json):Version:   3.1.201Commit:    b1768b4ae7Runtime Environment:OS Name:     Mac OS XOS Version:  10.15OS Platform: DarwinRID:         osx.10.15-x64Base Path:   /usr/local/share/dotnet/sdk/3.1.201/Host (useful for support):Version: 3.1.3Commit:  4a9f85e9f8.NET Core SDKs installed:3.1.201 [/usr/local/share/dotnet/sdk].NET Core runtimes installed:Microsoft.AspNetCore.App 3.1.3 [/usr/local/share/dotnet/shared/Microsoft.AspNetCore.App]Microsoft.NETCore.App 3.1.3 [/usr/local/share/dotnet/shared/Microsoft.NETCore.App]

生产环境上边,安装步骤如下:

$ wget -O- https://packages.microsoft.com/keys/microsoft.asc | gpg --dearmor > microsoft.asc.gpg
$ sudo mv microsoft.asc.gpg /etc/apt/trusted.gpg.d/
$ wget https://packages.microsoft.com/config/debian/9/prod.list
$ sudo mv prod.list /etc/apt/sources.list.d/microsoft-prod.list
$ sudo chown root:root /etc/apt/trusted.gpg.d/microsoft.asc.gpg
$ sudo chown root:root /etc/apt/sources.list.d/microsoft-prod.list
$ sudo apt-get update
$ sudo apt-get install apt-transport-https
$ sudo apt-get update
$ sudo apt-get install dotnet-sdk-3.1

安装很简单,这要感谢Microsoft,没有误导,也不需要刨坑。

安装完检查一下:

$ dotnet --info
.NET Core SDK (reflecting any global.json):Version:   3.1.201Commit:    b1768b4ae7Runtime Environment:OS Name:     debianOS Version:  9OS Platform: LinuxRID:         debian.9-x64Base Path:   /usr/share/dotnet/sdk/3.1.201/Host (useful for support):Version: 3.1.3Commit:  4a9f85e9f8.NET Core SDKs installed:3.1.201 [/usr/share/dotnet/sdk].NET Core runtimes installed:Microsoft.AspNetCore.App 3.1.3 [/usr/share/dotnet/shared/Microsoft.AspNetCore.App]Microsoft.NETCore.App 3.1.3 [/usr/share/dotnet/shared/Microsoft.NETCore.App]

命令写顺手了,没有分SDK和Runtime,正常应用时,生产环境可以只装Runtime。命令是在最后装Dotnet的一步,用以下命令:

$ sudo apt-get install aspnetcore-runtime-3.1
$ sudo apt-get install dotnet-runtime-3.1
  1. 生产环境安装MongoDB

详细步骤参见:15分钟从零开始搭建支持10w+用户的生产环境(二)

  1. 生产环境安装Jexus

详细步骤参见:15分钟从零开始搭建支持10w+用户的生产环境(三)

第二步:开发环境创建Demo项目

  1. 找个目录,创建解决方案(这一步不是必须,不过我习惯这么做。总要有个解决方案来存放工程):

% dotnet new sln -o demo
The template "Solution File" was created successfully.

这一步完成后,会在当前目录建立一个新目录demo,同时,在demo目录下创建文件demo.sln。

  1. 在demo目录下,建立工程:

% dotnet new webapi -o demo
The template "ASP.NET Core Web API" was created successfully.Processing post-creation actions...
Running 'dotnet restore' on demo/demo.csproj...Restore completed in 16.79 ms for /demo/demo/demo.csproj.Restore succeeded.
  1. 把新建的工程加到解决方案中:

% dotnet sln add demo/demo.csproj 
Project `demo/demo.csproj` added to the solution.
  1. 检查一下现在的目录和文件结构:

其中有一个WeatherForecast,包含两个文件:WeatherForecast.cs和WeatherForecastController.cs,是创建工程时自带的演示类。

现在我们运行一下工程。可以用VSC的「运行」,也可以命令行:

% dotnet run

运行Demo工程。

运行后,从浏览器访问:http://localhost:5000/WeatherForecast,会得到一串演示数据。这就是上面这个演示类的效果。

正式项目中,这两个文件要删掉。

到这一步,基础工程就搭好了。

我们要做一个API服务,这个服务里要有几个API,要用到数据库访问。为了测试API,我们需要装个Swagger。当然用Postman也可以,不过我习惯用Swagger。

  1. 增加Swagger包引用。在demo.csproj的同级目录下运行:

% dotnet add package Swashbuckle.AspNetCore

Swagger装好后,需要在Startup.cs中注册。

在ConfigureServices中加入以下代码:

services.AddSwaggerGen(c =>
{c.SwaggerDoc("v1", new OpenApiInfo { Title = "My API", Version = "V1" });
});

在Configure中加入以下代码:

app.UseSwagger();
app.UseSwaggerUI(c =>
{c.SwaggerEndpoint("/swagger/v1/swagger.json", "My API V1");
});

完成后,Startup.cs的代码:

namespace demo
{public class Startup{public Startup(IConfiguration configuration){Configuration = configuration;}public IConfiguration Configuration { get; }// This method gets called by the runtime. Use this method to add services to the container.public void ConfigureServices(IServiceCollection services){services.AddSwaggerGen(c =>{c.SwaggerDoc("v1", new OpenApiInfo { Title = "My API", Version = "V1" });});services.AddControllers();}// This method gets called by the runtime. Use this method to configure the HTTP request pipeline.public void Configure(IApplicationBuilder app, IWebHostEnvironment env){if (env.IsDevelopment()){app.UseDeveloperExceptionPage();}app.UseRouting();app.UseAuthorization();app.UseSwagger();app.UseSwaggerUI(c =>{c.SwaggerEndpoint("/swagger/v1/swagger.json", "My API V1");});app.UseEndpoints(endpoints =>{endpoints.MapControllers();});}}
}
  1. 增加MongoDB支持

选择一:引用官方包MongoDB.Driver:

% dotnet add package MongoDB.Driver

后面用包提供的SDK进行开发。

选择二:引用包Lib.Core.Mongodb.Helper:

% dotnet add package Lib.Core.Mongodb.Helper

这是我自己维护的一个Helper开源包,对官方的MongoDB.Driver做了一定程序的包装和简化操作。这个包目前在我公司的生产环境中用着。

这个包的开源地址:https://github.com/humornif/Lib.Core.Mongodb.Helper

引用完成后,需要在appsettings.json中增加数据库连接串:

"MongoConnection": "mongodb://localhost:27017/admin?wtimeoutMS=2000"

完成后,appsettings.json的代码如下:

{"MongoConnection": "mongodb://localhost:27017/admin?wtimeoutMS=2000","Logging": {"LogLevel": {"Default": "Information","Microsoft": "Warning","Microsoft.Hosting.Lifetime": "Information"}},"AllowedHosts": "*"
}
  1. 建立数据库操作类

在工程中创建一个目录Models,在目录下创建一个类文件Demo.cs:

using MongoDB.Bson;
using System;
using System.Collections.Generic;
using System.Linq;
using System.Threading.Tasks;namespace demo.Models
{public class Demo{public const string DATABASE = "DemoDB";public const string COLLECTION = "DemoCollection";public ObjectId _id { get; set; }public string demo_user_name { get; set; }public int demo_user_age { get; set; }}
}

在同一目录下,再创建另一个Dto类DemoDto.cs:

using System;
using System.Collections.Generic;
using System.Linq;
using System.Threading.Tasks;namespace demo.Models
{public class DemoDto{public string demo_user_name { get; set; }public int demo_user_age { get; set; }}
}

在工程中创建另一个目录DBContext,在目录下创建一个对应Demo类的数据库操作类DemoDBContext.cs:

using demo.Models;
using Lib.Core.Mongodb.Helper;
using MongoDB.Bson;
using MongoDB.Driver;
using System;
using System.Collections.Generic;
using System.Linq;
using System.Threading.Tasks;namespace demo.DBContext
{public class DemoDBContext : MongoHelper<Demo>{///创建数据库操作索引protected override async Task CreateIndexAsync(){}public DemoDBContext() : base(Demo.DATABASE, Demo.COLLECTION){}///保存数据到数据库internal async Task<bool> saveData(DemoDto data){Demo new_item = new Demo(){_id = ObjectId.GenerateNewId(),demo_user_name = data.demo_user_name,demo_user_age = data.demo_user_age,};bool result = await CreateAsync(new_item);return result;}///从数据库查询全部数据internal async Task<IEnumerable<DemoDto>> getAllData(){var fetch_data = await SelectAllAsync();List<DemoDto> result_list = new List<DemoDto>();fetch_data.ForEach(p =>{DemoDto new_item = new DemoDto(){demo_user_name = p.demo_user_name,demo_user_age = p.demo_user_age,};result_list.Add(new_item);});return result_list;}}
}

这三个类的关系是:

  • Demo类是数据类,对应MongoDB数据库中保存的数据。Demo.DATABASE是数据库中的DB名称,Demo.COLLECTION是数据库中的Collection名称。这个类决定数据在数据库中的保存位置和保存内容。

  • DemoDta是Dta的映射类,在正式使用时,可以用AutoMap与Demo关联。在这个Demo中,我用它来做数据从前端到API的传递。

  • DemoDBContext是对Demo结构数据的数据库操作。这个类派生自Lib.Core.MongoDB.Helper中的父类MongoHelper。所有对Demo数据的操作全在这个类中进行。

  1. 创建API控制器

在Controller目录中,创建DemoController.cs:

using demo.DBContext;
using demo.Models;
using Microsoft.AspNetCore.Mvc;
using System;
using System.Collections.Generic;
using System.Linq;
using System.Threading.Tasks;namespace demo.Controllers
{[ApiController][Route("[controller]")]public class DemoController : ControllerBase{[HttpPost][Route("savedata")]public ActionResult<string> saveData(DemoDto data){DemoDBContext dc = new DemoDBContext();bool result = dc.saveData(data).GetAwaiter().GetResult();if(result)return "OK";return "ERROR";}[HttpGet][Route("getdata")]public IEnumerable<DemoDto> getData(){DemoDBContext dc = new DemoDBContext();return dc.getAllData().GetAwaiter().GetResult();}}
}

在这个控制器中,做了两个API:

  • 基于POST的savedata,用来写入数据到数据库;

  • 基于GET的getdata,用来从数据库读取数据到前端。

数据库的操作,调用了DemoDBContext中写好的两个数据库操作方法。

数据库操作的完整方法,可以参见https://github.com/humornif/Lib.Core.Mongodb.Helper的详细说明。

  1. 检查一下现在的工程目录结构:

  1. 测试运行

在VSC中点击运行,或者命令行输入:

% dotnet run

等程序加载完成,可以访问http://localhost:5000/swagger,进行访问,并测试两个API。

第三步:发布到生产环境

  1. 发布应用

前边说了,开发环境是MAC,生产环境是Debian 9 x64,所以会涉及到一个跨平台的发布。

事实上,跨平台发布也很简单。这个应用的目的环境是Linux-64,所以,发布命令是:

% dotnet publish -r linux-x64

发布完成后,系统会显示发布的目录。这个项目,发布目录在demo/bin/Debug/netcoreapp3.1/linux-x64/publish。

  1. 打包传到服务器,并解包到一个目录。在这个演示中,我解包到了服务器的/var/demo。

  2. 在服务器Jexus中配置网站。

在/usr/jexus/siteconf中建立网站配置文件demo.80(文件名可以随便起,我的习惯是网站名称+端口号):

######################
# Web Site: DEMO
########################################port=80
root=/ /var/demo
hosts=*    #OR your.com,*.your.com# User=www-data# AspNet.Workers=2  # Set the number of asp.net worker processes. Defauit is 1.# addr=0.0.0.0
# CheckQuery=false
NoLog=trueAppHost={cmd=dotnet demo.dll; root=/var/demo; port=5000}# NoFile=/index.aspx
# Keep_Alive=false
# UseGZIP=false# UseHttps=true
# ssl.certificate=/x/xxx.crt  #or pem
# ssl.certificatekey=/x/xxx.key
# ssl.protocol=TLSv1.0 TLSv1.1 TLSv1.2
# ssl.ciphers=ECDHE-RSA-AES256-GCM-SHA384:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4:!DH:!DHE # DenyFrom=192.168.0.233, 192.168.1.*, 192.168.2.0/24
# AllowFrom=192.168.*.*
# DenyDirs=~/cgi, ~/upfiles
# indexes=myindex.aspx# Deny asp ...
rewrite=^/.+?\.(asp|cgi|pl|sh|bash|dll)(\?.*|)$  /.deny->$1
rewrite=.*/editor/.+                             /.deny->editor
# reproxy=/bbs/ http://192.168.1.112/bbs/
# host.Redirect=abc.com www.abc.com  301
# ResponseHandler.Add=myKey:myValue
ResponseHandler.Add=X-Frame-Options:SAMEORIGIN# Jexus php fastcgi address is '/var/run/jexus/phpsvr'
#######################################################
# fastcgi.add=php|socket:/var/run/jexus/phpsvr# php-fpm listen address is '127.0.0.1:9000'
############################################
# fastcgi.add=php|tcp:127.0.0.1:9000

在这个演示项目里,起作用的配置其实就一行:

AppHost={cmd=dotnet demo.dll; root=/var/demo; port=5000}

这一行配置了三件事:

  • 应用的运行命令是:dotnet demo.dll

  • 应用的运行目录是:/var/demo

  • 应用的运行端口是:5000

这样配置就完成了。

接下来,启动网站,在/usr/jexus中运行:

$ sudo ./jws start

网站就启动起来了。

第四步:测试

在本地浏览器中,输入:http://server_ip/swagger,跟在开发环境测试效果完全一样,可以进行数据库的写入和读取操作。

Done !!!

我把上面的代码,传到了Github上,需要了可以拉下来直接使用。

代码地址:https://github.com/humornif/Demo-Code/tree/master/0005/demo

您的赞赏是我最大的鼓励

I will be more solid with your donations

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/309593.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

[Java基础]体验Stream流

代码如下: package StreamTest;import java.lang.reflect.Array; import java.util.ArrayList;public class StreamDemo {public static void main(String[] args){ArrayList<String> list new ArrayList<String>();list.add("Tom");list.add("ja…

Cow Bowling POJ - 3176(基础的动态规划算法)

题意&#xff1a; 杨辉三角&#xff0c;让从顶部开始走到底部&#xff0c;所经过的每一层的点数相加&#xff0c;使得实现最高和。 题目&#xff1a; The cows don’t use actual bowling balls when they go bowling. They each take a number (in the range 0…99), thoug…

[Java基础]Stream流的常见生成方式

1.Collection体系的集合可以使用默认方法stream()生成流 default Stream< E > stream() 代码如下: package StreamTest;import java.util.ArrayList; import java.util.HashSet; import java.util.List; import java.util.Set; import java.util.stream.Stream;public …

Sumsets POJ - 2229(计数dp)

题意&#xff1a; 给一个数&#xff0c;是集合的总数和&#xff0c;集合元素只能为2的次幂数&#xff0c;问这样的集合有多少&#xff1f; 题目&#xff1a; Farmer John commanded his cows to search for different sets of numbers that sum to a given number. The cows…

15分钟从零开始搭建支持10w+用户的生产环境(二)

上一篇文章&#xff0c;把这个架构的起因&#xff0c;和操作系统的选择进行了详细说明。原文地址&#xff1a;15分钟从零开始搭建支持10w用户的生产环境(一)二、数据库的选择对于一个10W用户的系统&#xff0c;数据库选择很重要。一般来说&#xff0c;这个用户量&#xff0c;根…

[Java基础]Stream流的常见中间操作方法

代码如下: package StreamTest;import java.util.ArrayList;public class StreamDemo02 {public static void main(String[] args){ArrayList<String> list new ArrayList<String>();list.add("Tom");list.add("Bom");list.add("jack&q…

云原生初探

文章目录什么是云原生&#xff1f;第二讲 容器的基本概念什么是容器&#xff1f;容器运行时的生命周期容器项目的架构容器和VM的差异第三讲 Kubernetes核心概念什么是KubernetesKubernetes架构Kubernetes核心概念和API第四讲 理解Pod和容器设计模式为什么Pod必须是原子调度单位…

15分钟从零开始搭建支持10w+用户的生产环境(三)

上一篇文章介绍了这个架构中&#xff0c;选择MongoDB做为数据库的原因&#xff0c;及相关的安装操作。原文地址&#xff1a;15分钟从零开始搭建支持10w用户的生产环境(二)三、WebServer在SOA和gRPC大行其道的今天&#xff0c;WebServer在系统中属于重中之重&#xff0c;是一个系…

[Java基础]Stream流终结操作之forEachcount

代码如下: package StreamTest;import java.util.ArrayList;public class StreamDemo06 {public static void main(String[] args) {ArrayList<String> list new ArrayList<String>();list.add("Jack");list.add("Tom");list.add("张敏…

实现.Net程序中OpenTracing采样和上报配置的自动更新

前言OpenTracing是一个链路跟踪的开放协议&#xff0c;已经有开源的.net实现&#xff1a;opentracing-csharp&#xff0c;同时支持.net framework和.net core&#xff0c;Github地址&#xff1a;https://github.com/opentracing/opentracing-csharp。这个库支持多种链路跟踪模式…

[Java基础]Stream流综合练习

代码如下: package StreamDemoFinal;public class Actor {private String name;public Actor(String name) {this.name name;}public String getName() {return name;}public void setName(String name) {this.name name;} }package StreamDemoFinal;import java.util.Array…

基于 abp vNext 和 .NET Core 开发博客项目 - 用AutoMapper搞定对象映射

上一篇文章集成了定时任务处理框架Hangfire&#xff0c;完成了一个简单的定时任务处理解决方案。本篇紧接着来玩一下AutoMapper&#xff0c;AutoMapper可以很方便的搞定我们对象到对象之间的映射关系处理&#xff0c;同时abp也帮我们是现实了IObjectMapper接口&#xff0c;先根…

磁盘文件系统、挂载

参考&#xff1a;https://zhuanlan.zhihu.com/p/106459445 https://blog.csdn.net/qq_39521554/article/details/79501714 文件系统 持久化的数据是存储在外部磁盘上的&#xff0c;如果没有文件系统&#xff0c;访问这些数据需要直接读写磁盘的sector&#xff0c;而文件系统存…

[Java基础]Stream流的收集操作

代码如下: package CollectPack;import java.util.*; import java.util.stream.Collectors; import java.util.stream.Stream;public class CollectDemo {public static void main(String[] args){List<String> list new ArrayList<String>();list.add("林青…

15分钟从零开始搭建支持10w+用户的生产环境(一)

前言这是一个基于中小型企业或团队的架构设计。不考虑大厂。有充分的理由相信&#xff0c;大厂有绝对的实力来搭建一个相当复杂的环境。中小型企业或团队是个什么样子&#xff1f;开发团队人员配置不全&#xff0c;部分人员身兼开发过程上下游的数个职责&#xff1b;没有专职的…

高性能IO——Reactor模式

高性能IO——Reactor模式 参考&#xff1a;https://cloud.tencent.com/developer/article/1513447 目前的IO线程处理模型一般可以分为以下三类&#xff1a; 单线程阻塞I/O服务模型&#xff1b; while(true) {socket accept();handle(socket) }多线程阻塞I/O服务模型&#xf…

X-lab 开放实验室开源创新的故事

本报告为“开源软件供应链点亮计划暑期2020活动”中的“大咖说开源”第二期的特邀嘉宾视频&#xff0c;正好借此机会给大家介绍下 X-lab 实验室目前在开源方面开展的一些事情&#xff0c;欢迎大家关注&#xff0c;也欢迎更多热爱开源的朋友们加入&#xff01;摘要&#xff1a;2…

Circle and Points POJ - 1981(单位圆覆盖最多点)

题意&#xff1a; 给你n个点和点的位置&#xff0c;问单位圆最多能覆盖多少个点。 题目&#xff1a; You are given N points in the xy-plane. You have a circle of radius one and move it on the xy-plane, so as to enclose as many of the points as possible. Find h…

ASP.NET Core分布式项目实战(Consent 确认逻辑实现)--学习笔记

任务22&#xff1a;Consent 确认逻辑实现接下来&#xff0c;我们会在上一节的基础上添加两个按钮&#xff0c;同意和不同意&#xff0c;点击之后会把请求 post 到 ConsentController 处理&#xff0c;如果同意会通过 return url 跳转到客户端&#xff0c;如果不同意就会取消&am…