NET站点搭建,怎么搭建短视频系统

来源:http://www.roro2.com 作者:betway互联网 人气:67 发布时间:2019-11-16
摘要:原标题:怎么搭建短视频系统?全套负载均衡方案 剧情介绍 短视频系统跟直播系统有一样的特点,面向的用户群体数量较大,聚集时间点集中。比如午饭时间,晚上休闲时间。所以做

原标题:怎么搭建短视频系统?全套负载均衡方案

剧情介绍

短视频系统跟直播系统有一样的特点,面向的用户群体数量较大,聚集时间点集中。比如午饭时间,晚上休闲时间。所以做好系统的负载特别重要,既能提高系统的稳定性和可用性,从侧面来讲也能提高用户的体验和用户留存。

在传统的信息系统(比如小规模的ERPMES系统),往往只是进行简单的应用服务器和数据库服务器的分布式部署,以此来提高应用系统的负载能力,而伴随着访问的增大,应用服务器层面除了做硬件和网络的扩容,很难应对【套路式开头】。

betway 1


负载均衡的表述性解释咱不再说明,自行谷歌或百度即可。这里主要介绍两种负载均衡的方案。

当然现在开源技术很多,不就是分布式么,应用服务器分布式、数据库读写分离、缓存服务器、认证服务器。。。的确方法很多。那么不买关子了,今天就应用服务器层面的负载均衡讲讲,可以动手练练的技术:Nginx,当然也包括缓存技术:Redis。

方案一:使用运营商成熟的方案,比如阿里云的负载均衡SLB,腾讯云的负载均衡CLB。这些成熟的方案稳定性高,运维成本低。只需要日常维护后端服务即可,不过除非你是一定量级的大客户,否则无法个性定制。

初步的设想是这样的:通过Nginx对局域网内多个相同应用服务器进行进行负载均衡,并且各个相同应用共享一个缓存服务器【表达的就是这么简单】。拉个效果图:

方案二:自建负载均衡,该方案需要有基础的运维能力。需要运维人员持续跟踪,可以自由扩展定制。前期数量级小的话,建议走这种方案。后期数量级大的话,还是走方案一比较稳妥一些。

betway 2

这里介绍下方案二自建负载均衡的方式。按照最小方案来举例说明,均用1核1G5M带宽的服务器。注意:后期上线需要根据自身业务的情况进行配置扩展,这里是做演示举例用最低配置即可。

开始搭建【折腾】

一、首先需要准备相关资料,如下:

1、操作系统准备

  1. 系统域名

  2. Nginx负载服务器 1台(用于前台分发)。

  3. Web 后端服务器 2台(配置PHP环境,放置管理后台和接口)

  4. Mysql 数据库服务器 1台(配置数据库)

  5. Redis 缓存服务器 1台(配置缓存)

  6. Session 共享服务器 1台(共享数据Session)

  7. 以上服务器必须存在一个内网中,响应速度等体验会好一些。

Linux一台,当然一般为虚拟机,这里我安装了CentOS7,配置ip地址为:192.168.110.100,机器名就叫:centos。

二、其次将各个服务器按照原始系统的搭建方式进行依次搭建。这里重点说明下Nginx负载服务器和Session缓存服务器的搭建和配置方式。

可以运行asp.net mvc站点windows一台,比如windows10+iis8,配置ip地址为:192.168.110.1,机器名无所谓。

1.Nginx负载服务器的搭建,假设入口域名是yunbaozhibo

配置两台机器的hosts:

1.1安装pcre(依次操作)

Windows:C:Windowssystem32driversetchosts

192.168.110.100  linuxidc.com

CentOS: vim /etc/hosts

192.168.110.100  linuxidc.com 

获取pcre编译安装包,在在pcre.org/上可以获取当前最新的版本。

 2、安装Nginx

解压缩pcre-xx.tar.gz包

一般首先需要安装编译环境【反正不搞c,参照其他文章手动安装】,centos支持yum安装,一般就是yum install ,当然先su root下用root用户登录。

进入解压缩目录,执行./configure

保证虚拟机联网,执行命令:yum install gcc-c++

执行安装make & make install

本来以为可以直接安装nginx了,没想到还有三个依赖库要下载安装,套路一样:

1.2 安装openssl(依次操作)

下载安装包、解压安装包、进入配置目录,分别执行make 和make install。

获取openssl编译安装包,在openssl.org/source/上可以获取当前最新的版本。

当然这不是重点,直接说明:

解压缩openssl-xx.tar.gz包

其中本次下载版本:pcre-8.40.tar.gz、zlib-1.2.11.tar.gz、openssl-fips-2.0.10.tar.gz、nginx-1.12.2.tar.gz

进入解压缩目录,执行./config

 > 安装pcre
         获取pcre编译安装包,ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.40.tar.gz,拷贝到centos
         解压缩pcre-xx.tar.gz包。
         进入解压缩目录,分别执行 ./configure 、  make 、  make install

 > 安装openssl
         获取openssl编译安装包,在https class="crayon-o">: class="crayon-c">//www.openssl.org/source/openssl-fips-2.0.10.tar.gz,拷贝到centos

         解压缩openssl-xx.tar.gz包。
         进入解压缩目录,分别执行./config、make 、  make install

  > 安装zlib
         获取zlib编译安装包,在,拷贝到centos
         解压缩openssl-xx.tar.gz包。
         进入解压缩目录,分别执行 ./configure 、 make  、 make install

 > 安装nginx
        获取nginx,在,拷贝到centos
         解压缩nginx-xx.tar.gz包。
         进入解压缩目录,分别执行 ./configure、  make 、  make install

执行安装make & make install

3、配置nginx

1.3安装zlib(依次操作)

按照第2部分,安装好nginx,当然 没有想过其他安装经验的,肯定会出现很多问题,建议百度自己搞定。我们可以在命令行里输入:whereis nginx

获取zlib编译安装包, zlib.net/上可以获取当前最新的版本

如果正常安装会出现nginx的按照目录:

解压缩zlibxxx.zip包。注:这里的tar包应该是有问题,没法命令解压,只能换zip包

[root@centos bin]# whereis nginx
nginx: /usr/local/nginx
[root@centos bin]# cd /usr/local/nginx
[root@centos nginx]# ls -l
总用量 0
drwx------ 2 nobody root 6 11月 2 14:08 client_body_temp
drwxr-xr-x 2 root root 333 11月 2 20:56 conf
drwx------ 2 nobody root 6 11月 2 14:08 fastcgi_temp
drwxr-xr-x 2 root root 40 11月 2 11:05 html
drwxr-xr-x 2 root root 58 11月 2 20:58 logs
drwx------ 2 nobody root 6 11月 2 14:08 proxy_temp
drwxr-xr-x 2 root root 19 11月 2 11:05 sbin
drwx------ 2 nobody root 6 11月 2 14:08 scgi_temp
drwx------ 2 nobody root 6 11月 2 14:08 uwsgi_temp

进入解压缩目录,执行./configure

一般配置文件在conf文件夹下,名称叫nginx.conf,本次实验关键就是配置该文件,废话不说打开编辑:

执行安装make & make install

[root@centos nginx]# vim ./conf/nginx.conf

1.4安装Nginx

我们修改以下点【192.168.110.1:9001和9002站点是 底下第5点部署的应用站点,这里提前说明。那为啥同一个ip呢,本地演示就丢一台IIS上了,端口不同就可以】:

获取nginx,在nginx.org/en/download.上可以获取当前最新的版本

 1 http {
 2 
 3     #....省略一些编码
 4     #我们需要负载均衡的内部应用地址以及端口,其中weight为权重,这里就50% 各占一半了
 5     upstream    linuxidc.com{
 6        server 192.168.110.1:9001 weight=1;
 7        server 192.168.110.1:9002 weight=1;
 8     }
 9 
10     server {
11         listen       80;
           #需要负载的站点,这里就是本机设置的hosts站点
12         server_name  linuxidc.com;
13 
14         #charset koi8-r;
15 
16         #access_log  logs/host.access.log  main;
17 
18         location / {
19             root   html;
20             index  index.html index.htm;
21             proxy_pass  http://linuxidc.com;
22             #设置主机头和客户端真实地址,以便服务器获取客户端真实IP
23             proxy_set_header    X-Forwarded-Host $host;
24             proxy_set_header    X-Forwarded-Server $host;
25             proxy_set_header    X-Forwarded-For $proxy_add_x_forwarded_for;
26             proxy_set_header    X-Real-IP  $remote_addr;
27         }
28 
29         #...省略一些编码
30     }

解压缩nginx-xx.tar.gz包

 配置就是这么简单,在启动nginx之前建议关闭下centos的防火墙:

进入解压缩目录,执行./configure 这里会自动关联上边的三个组件

systemctl stop iptalbes.service

执行安装make & make install

开启nginx,在nginx目录下执行,顺便检测下是否成功:

1.5配置相关信息

 [root@centos nginx]# ./sbin/nginx

安装完成后,nginx在/usr/local/nginx中, nginx.conf在该文件下的conf中 nginx启动在sbin中。

 [root@centos nginx]# ps -ef | grep nginx
 root 1485 1 0 08:51 ? 00:00:00 nginx: master process ./sbin/nginx
 nobody 1486 1485 0 08:51 ? 00:00:00 nginx: worker process
 root 1663 1471 0 09:28 pts/0 00:00:00 grep --color=auto nginx

配置nginx.conf文件

 这个时候我们在Windows电脑上 浏览器访问下 linuxidc.com 应该就可以看到 9001或者9002站点了:

在http{}中的server{}前添加

betway 3

upstream yunbaozhibo{

是不是看不到到底访问了那台电脑,别急,我们先部署好redis再来写几个mvc请求服务就可以。

ip_hash; #第一次配置负载用ip_hash来处理session,后期修改为session复制

4、安装配置redis

server 192.168.7.11:80; #这里是web服务器的内网ip

和按照nginx一样的步骤,先下载,这里我下载了比较旧的版本redis-3.0.6.tar.gz,,当然你也可以下载最新的。

server 192.168.7.22:80; #这里是web服务器的内网ip

三板斧:解压文件、进入解压目录,执行make

#这里最好加一个简单的后备server,web全挂后跳转到他,友情提示下服务器正在维护。

然后进入子目录Src,可以看到一些执行文件【主要:redis-serverredis-cli】和一个redis.conf。我们最好在/usr/local下去建个redis目录,然后里面把几个主要的拷贝进去。

}

当然这里有个文件配置需要修改下:redis.cong下的是否后台开启:

在http{}中的server{}中的location /{}添加

vim redis.conf
#然后修改
daemonize yes
#同时注释掉bind 端,保证局域网都可以访问

proxy_pass yunbaozhibo;

 开启redis:

proxy_set_header Host $host;

 ./redis-server ./redis.conf

1 [root@centos redis]# redis-cli
2 127.0.0.1:6379> set test "helloword"
3 OK
4 127.0.0.1:6379> get test
5 "helloword"
6 127.0.0.1:6379> 

proxy_set_header X-Real-IP $remote_addr;

 就是这么简单,测试也成功了,这里再次强调,关闭centos的防火墙。

proxy_set_header X_Forwarded-For $proxy_add_x_forwarded_for;

5、编写并发布asp.net mvc 站点

配置完后,启动nginx /usr/local/nginx/sbin/nginx

通过上面的一步步安装,终于进入正题了,我们构建一个简单的asp.net mvc站点,这里就不废话了,然后把站点部署到本地iis,部署两个站点,端口后分别为9001和9002。

2.Session服务器的配置,假设Session的服务器ip为192.168.7.2。Redis端口为1122

这里需要说明的是,Windows的防火墙如果开启了,那么请在防火墙里面开启对端口9001和9002的进出站限制。

这里的Session服务器是使用Redis来缓存共享Session的。

betway 4

2.1正常安装并启动Redis服务

同时为了开发连接redis进行缓存服务,还需要安装api包,功能在这里:

2.2 找到web服务器中的php.ini文件,修改如下

betway 5

找到;session.save_handler = files

输入:Install-Package StackExchange.Redis

改为session.save_habdler = redis

在HomeController里添加以下服务:

找到;session.save_path = “/tmp”

public class HomeController : Controller
betway ,    {
        public ActionResult Index()
        {
            return View();
        }
        /// <summary>
        /// 获取服务请求地址
        /// </summary>
        /// <returns></returns>
        public JsonResult GetServerInfo()
        {
            var server = HttpContext.Request.Url.Host + " " + HttpContext.Request.Url.Port;
            return Json(server, JsonRequestBehavior.AllowGet);
        }
        /// <summary>
        /// 设置缓存
        /// </summary>
        /// <param name="key"></param>
        /// <param name="value"></param>
        /// <returns></returns>
        public JsonResult SetRedisValue(string key, string value)
        {
            RedisClient client = new RedisClient("192.168.110.100", 6379);

改为session.save_path = “tcp://192.168.7.2:1122” 返回搜狐,查看更多

            client.SetValue(key,value);

责任编辑:

            var server = HttpContext.Request.Url.Host + " " + HttpContext.Request.Url.Port;

            return Json($"访问服务器:{server},设置缓存键{key}的值为{value}", JsonRequestBehavior.AllowGet);
        }
        /// <summary>
        /// 读取缓存
        /// </summary>
        /// <param name="key"></param>
        /// <returns></returns>
        public JsonResult GetRedisValue(string key)
        {
            RedisClient client = new RedisClient("192.168.110.100", 6379);
            var v =client.GetValue(key);

            var server = HttpContext.Request.Url.Host + " " + HttpContext.Request.Url.Port;

            return Json($"访问服务器:{server},获取缓存键{key}的值为{v}", JsonRequestBehavior.AllowGet);
        }

6、测试运行

 终于开始[项目验收]

第1步,首先访问地址:"linuxidc.com 9002"、"cluster.com 9001"说明负载均衡成功了,9001和9002端口应用不断替换被用户访问。

*第2步,写缓存  ,可以发现,会提示你:"访问服务器:linuxidc.com 9001,设置缓存键test的值为helloword"*

第3步,请求缓存

"访问服务器:linuxidc.com 9002,获取缓存键test的值为helloword"

"访问服务器:linuxidc.com 9001,获取缓存键test的值为helloword"
说明,我们的试验成功了!

7、后感

回顾整个过程,其实真的只是小试验,仅此记录下学习的过程而已。这里当然还没有进行会话状态的同步、数据库层面的分布式。

本文永久更新链接地址:http://www.linuxidc.com/Linux/2017-11/148249.htm

betway 6

本文由必威发布于betway互联网,转载请注明出处:NET站点搭建,怎么搭建短视频系统

关键词:

最火资讯