Elasticsearch安装与系统参数设置.pdf

### Elasticsearch安装与系统参数设置 #### 操作系统选择与配置 Elasticsearch作为一个高性能的分布式搜索引擎，其稳定性和性能很大程度上取决于所运行的操作系统。官方推荐和支持的操作系统为CentOS 7，这是因为CentOS 7提供了较为稳定的环境，并且对于文件句柄数等关键资源的限制有了较大的改进。在国内服务器环境中，CentOS也是使用最为广泛的选择之一。 **系统选择：** - **版本：** Centos 7 (1611) - **发布日期：** 2016/12/12 CentOS 7因其广泛的资料支持、问题解决方案以及运维脚本积累而被普遍选用。选择CentOS 7作为Elasticsearch的运行环境，不仅能够利用其最新的特性，还能在此过程中积累问题处理的经验。 #### 运行ES的环境搭建 Elasticsearch基于Java开发，因此安装Elasticsearch前首先需要准备Java运行环境。Elasticsearch 5.4.0版本建议使用JDK 8或以上版本。需要注意的是，在JDK 1.8.0_73之前的版本存在已知的BUG，因此建议使用JDK 1.8.0_73或更高版本以获得更好的兼容性和稳定性。 #### 下载Elasticsearch 根据所需版本下载Elasticsearch安装包。官方网站通常提供最新版本以及历史版本的下载链接。下载完成后，解压到指定路径下，如`/usr/local/elasticsearch`。 #### 启动Elasticsearch 进入解压后的Elasticsearch目录下的`bin`子目录，执行启动命令： ```bash cd $ES_HOME/bin ./elasticsearch ``` #### 检查Elasticsearch是否正常启动 可以通过HTTP接口检查Elasticsearch是否正常启动，通常使用`curl`工具进行测试： ```bash curl -X GET '127.0.0.1:9200/_nodes/stats?pretty&filter_path=**.max_file_descriptors' ``` 此命令将返回Elasticsearch集群中各节点的状态信息，包括文件描述符的最大限制值等。 #### 了解与解决启动异常 ##### 文件句柄限制 Elasticsearch使用了大量的文件句柄，特别是在运行多个节点的情况下。默认情况下，CentOS 7每个进程的文件句柄数限制为4096，这可能不足以满足Elasticsearch的需求。因此，需要增加文件句柄数限制。可以通过编辑`/etc/security/limits.conf`文件实现这一目的： ```bash vim /etc/security/limits.conf ``` 在文件末尾添加以下内容： ```bash # 增加文件句柄数限制 rickysoft nofile 65536 rickyhard nofile 65536 ``` 其中，“ricky”是运行Elasticsearch进程的用户名，可以根据实际情况进行替换。 ##### 虚拟内存映射限制 Elasticsearch还使用了大量的内存映射文件，这些文件同样会占用虚拟内存映射的数量。默认情况下，CentOS 7中虚拟内存映射数量限制为较低的值，需要通过`sysctl`命令调整该限制： ```bash sysctl vm.max_map_count ``` 查看当前限制值，然后使用以下命令调整为官方推荐值： ```bash sysctl -w vm.max_map_count=262144 ``` 重启Elasticsearch服务后，再次检查配置是否生效。 #### 我的ES配置 为了更好地优化Elasticsearch的运行环境，还需要进行一系列系统级别的配置调整。 1. **禁用交换分区（Swap Off）** ```bash swapoff -a ``` 2. **调整swappiness参数** ```bash vim /proc/sys/vm/swappiness ``` 将值修改为1，表示尽量避免使用swap。 3. **增加文件句柄数限制** ```bash vim /etc/security/limits.conf ``` 添加以下内容： ```bash rickysoft nofile 65536 rickyhard nofile 65536 ``` 4. **增加内存锁定限制** ```bash vim /etc/security/limits.conf ``` 添加以下内容： ```bash rickysoft memlock -1 rickyhard memlock -1 ``` 5. **增加进程数限制** ```bash vim /etc/security/limits.conf ``` 添加以下内容： ```bash rickysoft nproc 10000 rickyhard nproc 10000 ``` 6. **增加虚拟内存映射限制** ```bash sysctl -w vm.max_map_count=262144 ``` 完成上述配置后，Elasticsearch将在更为优化的环境下运行，有助于提升其整体性能和稳定性。 从选择合适的操作系统到环境配置、安装、启动、异常处理等多个方面，都对Elasticsearch的部署和维护至关重要。遵循官方推荐的最佳实践和上述指南，可以有效提高Elasticsearch的可用性与性能。