15分钟从零开始搭建支持10w+用户的生产环境(二)

上一篇文章,把这个架构的起因,和操作系统的选择进行了详细说明。

原文地址:15分钟从零开始搭建支持10w+用户的生产环境(一)

二、数据库的选择

对于一个10W+用户的系统,数据库选择很重要。

一般来说,这个用户量,根据不同的应用,会形成单表年度400W~4000W条的数据量。在这个数据量下,我们需要相对大型的数据库。

可供选择的主流数据库:

类别数据库
关系型数据库MySQL, SQL Server for Linux, Oracle, DB2, PostgreDB
NoSQL数据库Radis, HBase, MongoDB

具体数据库的区别分析,网上有很多文章,这儿就不再多讨论。

在现在讨论的这个架构下,有几个要求:

  1. 数据库要是免费的;

  2. 数据库的安装要简单;

  3. 数据库的使用要方便。这个使用,包括管理和开发;

  4. 最重要的一点,是数据后期可扩展成分布式架构,以保证在不改动代码的情况下,支持B、C轮的数据:P。

在这个要求下,我们选择MongoDB作为主数据库。

MongoDB的官网:https://www.mongodb.com

MongoDB最新版下载:https://www.mongodb.com/download-center/community

community版和professional版本最大的区别是pro版有InMemoryDB模式,可以依托大内存建立存放在内存中的数据库文件。一般应用,社区版足够。

先看看MongoDB的安装有多简单:

第一步:下载数据库,以4.2.6 for Debian版本为例:

wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-debian92-4.2.6.tgz

下载完成后,打开压缩包,

tar xvf mongodb-linux-x86_64-debian92-4.2.6.tgz -C /your_folder

我们会得到以下文件,

-rw-r--r-- 1 test test  30608 Apr 17 11:10 LICENSE-Community.txt
-rw-r--r-- 1 test test  16726 Apr 17 11:10 MPL-2
-rw-r--r-- 1 test test   2617 Apr 17 11:10 README
-rw-r--r-- 1 test test  75405 Apr 17 11:10 THIRD-PARTY-NOTICES
-rw-r--r-- 1 test test 183512 Apr 17 11:13 THIRD-PARTY-NOTICES.gotools
drwxr-xr-x 2 test test   4096 Apr 20 19:29 bin

bin目录中,有以下文件,

-rwxr-xr-x 1 test test 12715648 Apr 17 11:12 bsondump
-rwxr-xr-x 1 test test     7694 Apr 17 11:36 install_compass
-rwxr-xr-x 1 test test 47998920 Apr 17 11:36 mongo
-rwxr-xr-x 1 test test 73240640 Apr 17 11:36 mongod
-rwxr-xr-x 1 test test 17526720 Apr 17 11:12 mongodump
-rwxr-xr-x 1 test test 17277000 Apr 17 11:12 mongoexport
-rwxr-xr-x 1 test test 17242056 Apr 17 11:12 mongofiles
-rwxr-xr-x 1 test test 17452192 Apr 17 11:12 mongoimport
-rwxr-xr-x 1 test test 17879808 Apr 17 11:13 mongoreplay
-rwxr-xr-x 1 test test 17851848 Apr 17 11:12 mongorestore
-rwxr-xr-x 1 test test 40628464 Apr 17 11:36 mongos
-rwxr-xr-x 1 test test 17029440 Apr 17 11:12 mongostat
-rwxr-xr-x 1 test test 16707368 Apr 17 11:12 mongotop

其中:

mongo是个shell,用来操作数据库。

mongod是单个数据库的服务程序,每个数据库都需要一个mongod进程。

mongos是集群的路由和入口,做集群时必须要用到。

别的都是一些管理工具,可以慢慢了解。

第二步:安装&启动

MongoDB本身是一个绿色软件,上一节的下载和解压,就是安装的过程了。

下面是启动数据库。

./mongod --dbpath your_database_folder_path

MongoDB运行,只需要一个数据库文件的存放目录。

当你看到命令执行后,出现一大篇内容,其中有两行:

I  NETWORK  [listener] Listening on 127.0.0.1
I  NETWORK  [listener] waiting for connections on port 27017

的时候,恭喜你,数据库已经上线了。

简单不?

但是一定要记着,运行简单并不等于这是个Access一样的小东西。

这是个大型的基于文档的NoSQL数据库!

如果想查询各个命令都有什么参数,可以在命令后边加 --help 来查询。

例如:

./mongod --help

里面有详细的说明。

下面列几个常用的参数:

--config 配置文件。MongoDB除了直接用命令行参数外,也可以把参数写在一个配置文件中,然后在config参数引用这个配置文件

--port MongoDB默认端口是27017,可以改成任何端口

--logpath 默认数据库日志是输出到终端的,可以改为保存到文件(也可以不用这个参数,而在命令行重定向)

--bind_ip MongoDB默认绑定IP是127.0.0.1,可以改成任意IP地址

--db_path 数据库文件的保存目录

下面,我们检查一下数据库的安装是否正确。

我们用mongo连到数据库进行操作:

$ ./mongo localhost:27017
MongoDB shell version v4.2.5
> use TestDB
switched to db TestDB
> db.collection.insert({"user":"test1"})
WriteResult({ "nInserted" : 1 })
> db.collection.insert({"user":"test2"})
WriteResult({ "nInserted" : 1 })
> db.collection.find()
{ "_id" : ObjectId("5ea0279699857fc83ddf6ef5"), "user" : "test1" }
> db.collection.find({"user":"test2"})
{ "_id" : ObjectId("5ea029a599857fc83ddf6ef6"), "user" : "test2" }
> exit

在这一节的最后,补充两个问题:

  1. 扩展性

上面介绍的是单MongoDB数据库的安装。这是最简单的一种形式,也是应用最多的一种形式。

如果数据很重要,为了防止任何情况的数据丢失,可以采用 Master + N Slave 的方式,做主从结构,把同样的多个库放到多个服务器上,互为备份。同时,这种方式还可以实现读写分离。

如果数据量再大,则可以把数据库扩展成集群,用以增加数据库的容量,并提升访问性能。

  1. 安全

上面介绍安装的时候,采用的默认端口。在实际使用时,可以改换一个端口,减少被扫描攻击的机率。

另外,数据库默认安装时,是不检查用户的。换言之,就是任何人都可以连到数据库。如果用在生产服务器上,一定要在数据库中建议用户和权限,以保证阻挡非法的访问。

MongoDB的安全问题,我会单独写一篇文章来说,敬请关注。

(未完待续)

您的赞赏是我最大的鼓励

I will be more solid with your donations

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/309587.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

[Java基础]Stream流的常见中间操作方法

代码如下: package StreamTest;import java.util.ArrayList;public class StreamDemo02 {public static void main(String[] args){ArrayList<String> list new ArrayList<String>();list.add("Tom");list.add("Bom");list.add("jack&q…

GCD and LCM Aizu - 0005(辗转相除)+GCD LCM Inverse POJ - 2429(java或【Miller Rabin素数測试】+【Pollar Rho整数分解】)

题目&#xff1a;GCD and LCM Aizu - 0005 Write a program which computes the greatest common divisor (GCD) and the least common multiple (LCM) of given a and b. Input Input consists of several data sets. Each data set contains a and b separated by a singl…

云原生初探

文章目录什么是云原生&#xff1f;第二讲 容器的基本概念什么是容器&#xff1f;容器运行时的生命周期容器项目的架构容器和VM的差异第三讲 Kubernetes核心概念什么是KubernetesKubernetes架构Kubernetes核心概念和API第四讲 理解Pod和容器设计模式为什么Pod必须是原子调度单位…

15分钟从零开始搭建支持10w+用户的生产环境(三)

上一篇文章介绍了这个架构中&#xff0c;选择MongoDB做为数据库的原因&#xff0c;及相关的安装操作。原文地址&#xff1a;15分钟从零开始搭建支持10w用户的生产环境(二)三、WebServer在SOA和gRPC大行其道的今天&#xff0c;WebServer在系统中属于重中之重&#xff0c;是一个系…

[Java基础]Stream流终结操作之forEachcount

代码如下: package StreamTest;import java.util.ArrayList;public class StreamDemo06 {public static void main(String[] args) {ArrayList<String> list new ArrayList<String>();list.add("Jack");list.add("Tom");list.add("张敏…

Prime Number Aizu - 0009(素数筛)

题意&#xff1a; 给一个数n&#xff0c;问1~n内有多少个素数 题目&#xff1a; Write a program which reads an integer n and prints the number of prime numbers which are less than or equal to n. A prime number is a natural number which has exactly two distin…

实现.Net程序中OpenTracing采样和上报配置的自动更新

前言OpenTracing是一个链路跟踪的开放协议&#xff0c;已经有开源的.net实现&#xff1a;opentracing-csharp&#xff0c;同时支持.net framework和.net core&#xff0c;Github地址&#xff1a;https://github.com/opentracing/opentracing-csharp。这个库支持多种链路跟踪模式…

Golang中的error

文章目录Golang中的errorerror源码error创建Unwrap()、Is() 和 As()参考&#xff1a;https://www.flysnow.org/2019/09/06/go1.13-error-wrapping.html Golang中的error error源码 type error interface {Error() string }error 是一个接口类型&#xff0c;它包含一个 Error(…

[Java基础]Stream流综合练习

代码如下: package StreamDemoFinal;public class Actor {private String name;public Actor(String name) {this.name name;}public String getName() {return name;}public void setName(String name) {this.name name;} }package StreamDemoFinal;import java.util.Array…

Apple Catching POJ - 2385(基础的动态规划算法)

题意&#xff1a; 给你两个数字n和m&#xff1b;代表会有n个苹果掉落&#xff0c;m次可以移动的机会&#xff1b;有两棵树&#xff0c;开始你站在树1下面&#xff0c;一分钟只能移动一次&#xff0c;下面的数值代表在哪一颗树下会掉落苹果&#xff1b;问你在可移动的范围内&am…

基于 abp vNext 和 .NET Core 开发博客项目 - 用AutoMapper搞定对象映射

上一篇文章集成了定时任务处理框架Hangfire&#xff0c;完成了一个简单的定时任务处理解决方案。本篇紧接着来玩一下AutoMapper&#xff0c;AutoMapper可以很方便的搞定我们对象到对象之间的映射关系处理&#xff0c;同时abp也帮我们是现实了IObjectMapper接口&#xff0c;先根…

磁盘文件系统、挂载

参考&#xff1a;https://zhuanlan.zhihu.com/p/106459445 https://blog.csdn.net/qq_39521554/article/details/79501714 文件系统 持久化的数据是存储在外部磁盘上的&#xff0c;如果没有文件系统&#xff0c;访问这些数据需要直接读写磁盘的sector&#xff0c;而文件系统存…

[Java基础]Stream流的收集操作

代码如下: package CollectPack;import java.util.*; import java.util.stream.Collectors; import java.util.stream.Stream;public class CollectDemo {public static void main(String[] args){List<String> list new ArrayList<String>();list.add("林青…

Bound Found POJ - 2566(尺取法+前缀和创造区间变化趋势)

题意&#xff1a; 给定一个数组和一个值t&#xff0c;求一个子区间使得其和的绝对值与t的差值最小&#xff0c;如果存在多个&#xff0c;任意解都可行。 题目&#xff1a; Signals of most probably extra-terrestrial origin have been received and digitalized by The Ae…

MESI 缓存一致性协议

MESI 缓存一致性协议 多核场景下&#xff0c;仅仅依靠CAS这一类硬件原语并不能实现同步&#xff0c;因为原子指令底层实现也可能包含多条微指令&#xff0c;而原子指令的原子性是相对于一个核而言的&#xff0c;多条原子指令在各自的CPU核上都是原子执行的。所以要解决这个问题…

15分钟从零开始搭建支持10w+用户的生产环境(一)

前言这是一个基于中小型企业或团队的架构设计。不考虑大厂。有充分的理由相信&#xff0c;大厂有绝对的实力来搭建一个相当复杂的环境。中小型企业或团队是个什么样子&#xff1f;开发团队人员配置不全&#xff0c;部分人员身兼开发过程上下游的数个职责&#xff1b;没有专职的…

Sum of Consecutive Prime Numbers POJ - 2739(线性欧拉筛+尺取法)

题意&#xff1a; 一些正整数可以由一个或多个连续质数的总和表示。给定一个的正整数n,问满足条件的有多少种情况&#xff1f; 题目&#xff1a; Some positive integers can be represented by a sum of one or more consecutive prime numbers. How many such representat…

高性能IO——Reactor模式

高性能IO——Reactor模式 参考&#xff1a;https://cloud.tencent.com/developer/article/1513447 目前的IO线程处理模型一般可以分为以下三类&#xff1a; 单线程阻塞I/O服务模型&#xff1b; while(true) {socket accept();handle(socket) }多线程阻塞I/O服务模型&#xf…

X-lab 开放实验室开源创新的故事

本报告为“开源软件供应链点亮计划暑期2020活动”中的“大咖说开源”第二期的特邀嘉宾视频&#xff0c;正好借此机会给大家介绍下 X-lab 实验室目前在开源方面开展的一些事情&#xff0c;欢迎大家关注&#xff0c;也欢迎更多热爱开源的朋友们加入&#xff01;摘要&#xff1a;2…