1.0、 fastDFS
@H_404_3@fastDFS介绍
FastDFS是用c语言编写的一款开源的分布式文件系统,它是由淘宝资深架构师余庆编写并开源。FastDFS专为互联
网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用FastDFS很
容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。
@H_404_3@fastDFS架构
-
Tracker
Tracker Server作用是负载均衡和调度,通过Tracker server在文件上传时可以根据一些策略找到Storage server提供文件上传服务。可以将@H_404_3@tracker称为追踪服务器或调度服务器。
-
Storage
Storage Server作用是文件存储,客户端上传的文件最终存储在Storage服务器上,Storage server没有实现自己的文件系统而是使用操作系统的文件系统来管理文件。可以将storage称为存储服务器。
1.1 、上传
1.2 、安装依赖
1.2.1、 安装GCC依赖
@H_404_3@GCC用来对C语言代码进行编译运行,使用yum命令安装:
sudo yum -y install gcc
1.2.2 、安装unzip工具
@H_404_3@unzip工具可以对压缩包进行解压
sudo yum install -y unzip zip
1.2.3、 安装libevent
sudo yum -y install libevent
1.2.4、 安装Nginx所需依赖
sudo yum -y install pcre pcre-devel zlib zlib-devel openssl openssl-devel
1.2.5、 安装libfastcommon-master
这个没有yum包,只能通过编译安装:
-
解压上传的
libfastcommon-master.zip
unzip libfastcommon-master.zip
-
进入解压完成的目录:
cd libfastcommon-master
-
编译并且安装:
sudo ./make.sh sudo ./makesh install
1.3、 安装FastDFS
1.3.1、 编译安装
-
解压
tar -xvf FastDFS_v5.08.tar.gz
-
进入解压目录
cd FastDFS
-
编译并安装
sudo ./make.sh sudo ./make.sh install
-
校验安装结果
- 安装完成,能在
/etc/init.d/
目录,通过命令ll /etc/init.d/ | grep fdfs
看到FastDFS提供的启动脚本:
fdfs_trackerd
是tracker启动脚本fdfs_storaged
是storage启动脚本
- 安装完成,能在
2. 可以在 /etc/fdfs
目录,通过命令查看到以下配置文件模板:
1.3.2、 启动tracker
- 将/etc/fdfs/下的tracker.conf.sample文件命名为tracker.conf
sudo cp tracker.conf.sample tracker.conf
- 编辑tracker配置
sudo vim tracker.conf
- 将里面的base_path改成/fdfs/tracker
base_path=/fdfs/tracker
- 创建/fdfs/tracker文件夹
sudo mkdir -p /fdfs/tracker
- 启动tracker
service fdfs_trackerd start #方法1
sh /etc/init.d/fdfs_trackerd #方法2
- 查看启动状态
ps -ef|grep fdfs
- 设置开机自启动
sudo chkconfig fdfs_trackerd on
1.3.3、 启动storage
- 将/etc/fdfs/下的storage.conf.sample文件命名为storage.conf
sudo cp storage.conf.sample storage.conf
- 编辑storage配置
sudo vim storage.conf
base_path=/fdfs/storage # storage的数据和日志存放目录
store_path0=/fdfs/storage # storage的上传文件存放路径
tracker_server=主机自己的ip:22122 # tracker的地址
- 创建/fdfs/storage文件夹
sudo mkdir -p /leyou/fdfs/storage
- 启动storage
service fdfs_storaged start #方法1
sh /etc/init.d/fdfs_storaged #方法2
- 查看启动状态
ps -ef|grep fdfs
- 设置开机自启动
sudo chkconfig fdfs_storaged on
1.3.4、 测试文件上传
将/etc/fdfs/下的client.conf.sample文件命名为client.conf
mv client.conf.sample client.conf
修改client.conf
vim client.conf
修改配置:
tracker_server=主机自己的ip:22122
base_path=/tmp
在/etc/fdfs目录下执行如下命令测试(前提在tmp文件夹下有1.png文件)
/usr/bin/fdfs_upload_file client.conf /tmp/1.png
有输出路径则成功
浏览器访问
主机ip/group1/M00/00/00/rBEADGB4WAeAPrXLAAADs09cdiA248.png
1.4、 安装Nginx及FastDFS模块
1.4.1 、FastDFS的Nginx模块
- 解压
cd /home/fdfs/
tar -xvf fastdfs-Nginx-module_v1.16.tar.gz
# 进入配置目录
cd /home/leyou/fdfs/fastdfs-Nginx-module/src/
# 修改配置
vim config
# 执行下面命令(将配置中的/usr/local改为/usr):
:%s+/usr/local/+/usr/+g
- 复制mod_fastdfs.conf配置文件到/etc/fdfs中
cp mod_fastdfs.conf /etc/fdfs
- 进入/etc/fdfs
cd /etc/fdfs
- 修改 /etc/fdfs下的mod_fastdfs.conf
vim mod_fastdfs.conf
tracker_server=你设置的tracker主机ip:22122
url_have_group_name = true
store_path0=/fdfs/storage
- 复制 FastDFS的部分配置文件到/etc/fdfs目录
cd /home/leyou/fdfs/FastDFS/conf/
cp http.conf mime.types /etc/fdfs/
1.4.2、 安装Nginx
- 解压
tar -xvf Nginx-1.10.0.tar.gz
cd /home/Nginx-1.10.0
- 配置
sudo ./configure --prefix=/opt/Nginx --sbin-path=/usr/bin/Nginx --add-module=/home/fdfs/fastdfs-Nginx-module/src
- 编译安装
@H_404_3@注:已经安装nginx不需要安装 编译即可 注意非离线安装安装包的位置可能不一样,上一步配置不一样
sudo make
sudo make install
- 备份原来的Nginx
mv /usr/bin/Nginx /usr/bin/Nginx-back
cp objs/Nginx /usr/bin/
- 配置Nginx整合fastdfs-module模块
需要修改Nginx配置文件,在/opt/Nginx/config/Nginx.conf文件中:
sudo vim /opt/Nginx/conf/Nginx.conf
找到添加server的合适位置(参考自带的server的位置,类似于html同级标签)添加如下内容
server {
listen 80;
server_name 换成自己的主机ip;
proxy_set_header X-Forwarded-Host $host;
proxy_set_header X-Forwarded-Server $host;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
# 监听域名中带有group的,交给FastDFS模块处理
location ~/group([0-9])/ {
ngx_fastdfs_module;
}
}
- 启动
Nginx # 启动
Nginx -s stop # 停止
Nginx -s reload # 重新加载配置
- 设置Nginx开机启动
创建一个开机启动的脚本:
vim /etc/init.d/Nginx
#!/bin/sh
#
# Nginx - this script starts and stops the Nginx daemon
#
# chkconfig: - 85 15
# description: Nginx is an HTTP(S) server, HTTP(S) reverse \
# proxy and IMAP/POP3 proxy server
# processname: Nginx
# config: /etc/Nginx/Nginx.conf
# config: /etc/sysconfig/Nginx
# pidfile: /var/run/Nginx.pid
# Source function library.
. /etc/rc.d/init.d/functions
# Source networking configuration.
. /etc/sysconfig/network
# Check that networking is up.
[ "$NETWORKING" = "no" ] && exit 0
Nginx="/usr/bin/Nginx"
prog=$(basename $Nginx)
Nginx_CONF_FILE="/opt/Nginx/conf/Nginx.conf"
[ -f /etc/sysconfig/Nginx ] && . /etc/sysconfig/Nginx
lockfile=/var/lock/subsys/Nginx
make_dirs() {
# make required directories
user=`$Nginx -V 2>&1 | grep "configure arguments:.*--user=" | sed 's/[^*]*--user=\([^ ]*\).*/\1/g' -`
if [ -n "$user" ]; then
if [ -z "`grep $user /etc/passwd`" ]; then
useradd -M -s /bin/nologin $user
fi
options=`$Nginx -V 2>&1 | grep 'configure arguments:'`
for opt in $options; do
if [ `echo $opt | grep '.*-temp-path'` ]; then
value=`echo $opt | cut -d "=" -f 2`
if [ ! -d "$value" ]; then
# echo "creating" $value
mkdir -p $value && chown -R $user $value
fi
fi
done
fi
}
start() {
[ -x $Nginx ] || exit 5
[ -f $Nginx_CONF_FILE ] || exit 6
make_dirs
echo -n $"Starting $prog: "
daemon $Nginx -c $Nginx_CONF_FILE
retval=$?
echo
[ $retval -eq 0 ] && touch $lockfile
return $retval
}
stop() {
echo -n $"Stopping $prog: "
killproc $prog -QUIT
retval=$?
echo
[ $retval -eq 0 ] && rm -f $lockfile
return $retval
}
restart() {
configtest || return $?
stop
sleep 1
start
}
reload() {
configtest || return $?
echo -n $"Reloading $prog: "
killproc $Nginx -HUP
RETVAL=$?
echo
}
force_reload() {
restart
}
configtest() {
$Nginx -t -c $Nginx_CONF_FILE
}
rh_status() {
status $prog
}
rh_status_q() {
rh_status >/dev/null 2>&1
}
case "$1" in
start)
rh_status_q && exit 0
$1
;;
stop)
rh_status_q || exit 0
$1
;;
restart|configtest)
$1
;;
reload)
rh_status_q || exit 7
$1
;;
force-reload)
force_reload
;;
status)
rh_status
;;
condrestart|try-restart)
rh_status_q || exit 0
;;
*)
echo $"Usage: $0 {start|stop|status|restart|condrestart|try-restart|reload|force-reload|configtest}"
exit 2
esac
# 修改权限
chmod 777 /etc/init.d/Nginx
# 添加到服务列表
chkconfig --add /etc/init.d/Nginx
- 设置开机启动
chkconfig Nginx on
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。