关键词：

文章目录

• FastDFS 分布式文件系统
• • 1. FastDFS 架构
  • 2. FastDFS 在CentOS中环境配置
  • • 1. 配置虚拟机 (两台虚拟机的以下操作保持一致)
    • • 1.1 上传相应的文件
      • 1.2 安装c++ 环境 `yum install -y gcc gcc-c++`
      • 1.3 安装libevent 环境 `yum install -y libevent`
      • 1.4 安装 libfastcommon-1.0.42
      • 1.5 安装本体 fastdfs
    • 2. 配置 tracker 服务 (153 服务器节点)
    • 3. 配置 storage 服务 (152 服务器节点)
    • 4. 启动两个服务后, 进行配置并测试文件上传
    • • 4.1 配置
      • 4.2 测试
      • • 上传该图片 :
  • PS 注意项

FastDFS 分布式文件系统

1. FastDFS 架构

2. FastDFS 在CentOS中环境配置

准备两台虚拟机: 一台为 Tracker Server, 另一台为 Storage Server.

1. 配置虚拟机 (两台虚拟机的以下操作保持一致)

1.1 上传相应的文件

1.2 安装c++ 环境 yum install -y gcc gcc-c++

1.3 安装libevent 环境 yum install -y libevent

1.4 安装 libfastcommon-1.0.42

• tar -zxvf libfastcommon-1.0.42.tar.gz 解压安装包
• cd libfastcommon-1.0.42 进入该目录下
• ./make.sh 编译该环境
• ./make.sh install 安装
  

1.5 安装本体 fastdfs

• tar -zxvf fastdfs-6.04.tar.gz 解压安装包
• cd fastdfs-6.04 进入该目录下
• ./make.sh 编译该环境
• ./make.sh install 安装
• cp /home/software/fastdfs-6.04/conf/* /etc/fdfs/ 拷贝配置文件到 /etc/fdfs 下
  

ps: 观察生成的启动命令: 如下

2. 配置 tracker 服务 (153 服务器节点)

• cd /etc/fdfs/ 进入配置文件目录
• vim tracker.conf 修改tracker.conf
  
• mkdir /usr/local/fsatdfs/tracker -p 创建该基础路径目录
• /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf 启动FastDFS的tracker服务
  

3. 配置 storage 服务 (152 服务器节点)

• cd /etc/fdfs/ 进入配置文件目录

• vim storage.conf 修改 storage.conf
  
  

• mkdir /usr/local/fastdfs/storage -p 创建base文件夹

• 保持退出
• /usr/bin/fdfs_storaged /etc/fdfs/storage.conf 启动 Storage Server
  

4. 启动两个服务后, 进行配置并测试文件上传

4.1 配置

• 配置storage节点的 client.conf 文件
  cd /etc/fdfs/
vim client.conf
  
• mkdir /usr/local/fastdfs/client -p 创建base文件夹
  

4.2 测试

• wget https://img-blog.csdnimg.cn/20210328103402865.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224
  随便下载一个图片(ps: yum -y install wget 安装wget 命令)
• ls 20* 查看该下载的图片
• mv 20210328103402865.jpg\\?x-oss-process\\=image%2Fresize\\,m_fixed\\,h_224\\,w_224 20210328103402865.jpg 更改名字
• mv 20210328103402865.jpg /home/ 移动位置
  

上传该图片 :

/usr/bin/fdfs_test /etc/fdfs/client.conf upload /home/20210328103402865.jpg

• cd /usr/local/fastdfs/storage/data/00/00
  

PS 注意项

1. 必须要先启动 Tracker Server, 然后启动 Storage Server, 顺序颠倒后, storage server 的心跳无法发送给tracker server.
2. Storage Server 的端口号默认为: 8888
3. 默认的 Tracker Server 的端口号为: 22122

架构师成长记_第九周_01_fastdfs在centos中环境配置(代码片段)

文章目录FastDFS分布式文件系统1.FastDFS架构2.FastDFS在CentOS中环境配置1.配置虚拟机(两台虚拟机的以下操作保持一致)1.1上传相应的文件1.2安装c++环境`yuminstall-ygccgcc-c++`1.3安装libevent环境`yuminstall-ylibevent`1.4安... 查看详情

架构师成长记_第九周_02_配置nginx,实现fastdfs文件服务器(代码片段)

文章目录配置nginx,实现fastdfs文件服务器1.安装配置nginx-fastdfs模块`PS:保证Nginx服务器节点和storage节点的路径一致`2.安装nginx配置nginx-fastdfs模块配置文件3.测试配置nginx,实现fastdfs文件服务器1.安装配置nginx-fastdfs模块PS:保证Nginx... 查看详情

架构师成长记_第九周_02_配置nginx,实现fastdfs文件服务器(代码片段)

文章目录配置nginx,实现fastdfs文件服务器1.安装配置nginx-fastdfs模块`PS:保证Nginx服务器节点和storage节点的路径一致`2.安装nginx配置nginx-fastdfs模块配置文件3.测试配置nginx,实现fastdfs文件服务器1.安装配置nginx-fastdfs模块PS:保证Nginx... 查看详情

架构师成长记_第八周_20_elasticsearch集群构建(代码片段)

文章目录Elasticsearch集群构建1.先进行克隆三台服务器2.搭建es集群2.1分别对三台服务器(es01,es02,es03)做如下操作2.2操作三台服务器(es01,es02,es03节点)3.查看配置信息`moreelasticsearch.yml|grep^[^#]`4.启动ES集群Elasticsearch集群构建1.先进... 查看详情

架构师成长记_第八周_20_elasticsearch集群构建(代码片段)

文章目录Elasticsearch集群构建1.先进行克隆三台服务器2.搭建es集群2.1分别对三台服务器(es01,es02,es03)做如下操作2.2操作三台服务器(es01,es02,es03节点)3.查看配置信息`moreelasticsearch.yml|grep^[^#]`4.启动ES集群Elasticsearch集群构建1.先进... 查看详情

架构师成长记_第八周_01_分布式搜索引擎elasticsearch快速入门(代码片段)

文章目录分布式搜索引擎ElasticSearch快速入门1.搜索引擎的对比(LucenevsSolrvsElasticsearch)1.1Lucene1.2Solr1.3Elasticsearch([官网描述](https://www.elastic.co/cn/what-is/elasticsearch))2.ES核心术语2.1索引库index(相当于数据库中的表)2.2类型type(相当于数据 查看详情

架构师成长记_第十周_01_零起步centos7中配置doker(未完)(代码片段)

文章目录零起步centos7配置doker1.启动虚拟机并执行以下命令安装docker2.常用docker命令测试零起步centos7配置doker1.启动虚拟机并执行以下命令安装dockercurl-fsSLget.docker.com-oget-docker.sh安装docker脚本shget-docker.sh--mirrorAliyun启动脚本,并选择... 查看详情

架构师成长记_第十周_01_零起步centos7中配置doker(未完)(代码片段)

文章目录零起步centos7配置doker1.启动虚拟机并执行以下命令安装docker2.常用docker命令测试零起步centos7配置doker1.启动虚拟机并执行以下命令安装dockercurl-fsSLget.docker.com-oget-docker.sh安装docker脚本shget-docker.sh--mirrorAliyun启动脚本,并选择... 查看详情

架构师成长记_第十周_01_零起步centos7中配置doker(未完)(代码片段)

文章目录零起步centos7配置doker1.启动虚拟机并执行以下命令安装docker2.常用docker命令测试零起步centos7配置doker1.启动虚拟机并执行以下命令安装dockercurl-fsSLget.docker.com-oget-docker.sh安装docker脚本shget-docker.sh--mirrorAliyun启动脚本,并选择... 查看详情

架构师成长记_第八周_18_es-滚动搜索(代码片段)

ES-滚动搜索PS:滚动搜索是基于快照的方式,所以在搜索的时候,如果用户进行更新数据,数据是不会被滚动搜索加载到的.1.首次滚动搜索.POST:http://192.168.92.140:9200/shop/_search?scroll=1m"query":"match_all":,"sort":["_doc"... 查看详情

架构师成长记_第八周_18_es-滚动搜索(代码片段)

ES-滚动搜索PS:滚动搜索是基于快照的方式,所以在搜索的时候,如果用户进行更新数据,数据是不会被滚动搜索加载到的.1.首次滚动搜索.POST:http://192.168.92.140:9200/shop/_search?scroll=1m"query":"match_all":,"sort":["_doc"... 查看详情

架构师成长记_第八周_06_es-文档的基本操作

文章目录ES-文档的基本操作:添加文档与自动映射1.添加文档2.添加多个文档ES-文档的基本操作:添加文档与自动映射1.添加文档2.添加多个文档 查看详情

架构师成长记_第八周_21_springboot整合elasticsearch(代码片段)

文章目录Springboot整合elasticsearch1.创建es模块2.在es的模块下引入依赖PS:改版本对应的es是6.4.3,故我们集群ES的配置需要下调为6.4.3.(或者提升这里的版本)3.创建yml配置文件4.创建启动类5.运行报错(是由于无netty配置引起的错误)6.解决... 查看详情

架构师成长记_第八周_21_springboot整合elasticsearch(代码片段)

文章目录Springboot整合elasticsearch1.创建es模块2.在es的模块下引入依赖PS:改版本对应的es是6.4.3,故我们集群ES的配置需要下调为6.4.3.(或者提升这里的版本)3.创建yml配置文件4.创建启动类5.运行报错(是由于无netty配置引起的错误)6.解决... 查看详情

架构师成长记_第七周_07_cas单点登录系统构建(代码片段)

CAS单点登录系统构建(初次访问:11,12步):验证临时票据继续完善controller/***CAS的统一登录接口*目的:1.登录后创建用户的全局会话->uniqueToken*2.创建用户全局门票,用以表示在CAS端是否登录->userTicket*3.创建用户的临时票据,用于会跳... 查看详情

架构师成长记_第八周_18_es-批量查询(代码片段)

文章目录ES-批量查询1.之前使用的批量查询方式2.使用_mget进行批量查询3.二者的区别ES-批量查询1.之前使用的批量查询方式GET:http://192.168.92.140:9200/shop/_doc/_search"query":"ids":"type":"_doc","values":["100 查看详情

架构师成长记_第八周_18_es-批量查询(代码片段)

文章目录ES-批量查询1.之前使用的批量查询方式2.使用_mget进行批量查询3.二者的区别ES-批量查询1.之前使用的批量查询方式GET:http://192.168.92.140:9200/shop/_doc/_search"query":"ids":"type":"_doc","values":["100 查看详情

架构师成长记_第八周_17_es-深度分页

ES-深度分页PS:因为使用from+size的方式只可以搜索小于等于10000的数据,这个是ES做的一个性能防护,防止用户搜索过深而导致的系统性能下降.1.查看深度分页设置2.修改深度分页设置,提升搜索量3.再次搜索之前的9999的分类搜索量 查看详情