1. 程式人生 > >ansible示例,離線安裝etcd

ansible示例,離線安裝etcd

groupmod multipl cfengine 技術 mkf 運行 創建 fun default

一、基礎介紹

==========================================================================================

1、簡介

ansible是新出現的自動化運維工具,基於Python開發,集合了眾多運維工具(puppet、cfengine、chef、func、fabric)的優點,實現了批量系統配置、批量程序部署、批量運行命令等功能。ansible是基於模塊工作的,本身沒有批量部署的能力。真正具有批量部署的是ansible所運行的模塊,ansible只是提供一種框架。主要包括:

(1)、連接插件connection plugins:負責和被監控端實現通信;

(2)、host inventory:指定操作的主機,是一個配置文件裏面定義監控的主機;

(3)、各種模塊核心模塊、command模塊、自定義模塊;

(4)、借助於插件完成記錄日誌郵件等功能;

(5)、playbook:劇本執行多個任務時,非必需可以讓節點一次性運行多個任務。

2、總體架構

技術分享

3、特性

(1)、no agents:不需要在被管控主機上安裝任何客戶端;

(2)、no server:無服務器端,使用時直接運行命令即可;

(3)、modules in any languages:基於模塊工作,可使用任意語言開發模塊;

(4)、yaml,not code:使用yaml語言定制劇本playbook;

(5)、ssh by default:基於SSH工作;

(6)、strong multi-tier solution:可實現多級指揮。

4、優點
(1)、輕量級,無需在客戶端安裝agent,更新時,只需在操作機上進行一次更新即可;
(2)、批量任務執行可以寫成腳本,而且不用分發到遠程就可以執行;
(3)、使用python編寫,維護更簡單,ruby語法過於復雜;
(4)、支持sudo。

5、任務執行流程

技術分享

說明:

(1)、以上內容大多是基於他人分享的基礎上總結而來,學習借鑒之用;

二、centos7簡單安裝和配置ansible

==========================================================================================

(1)、安裝EPEL庫

# yum install epel-release
# yum repolist

(2)、安裝ansible

# yum install ansible

(3)、生成公鑰和私鑰並下發

# ssh-keygen  出現提示選者默認即可
# ssh-copy-id [email protected]
# ssh-copy-id [email protected]

(4)、配置操作主機清單

# vi /etc/ansible/hosts
[storm_cluster]  #測試主機分組名稱
192.168.118.129
192.168.118.130

(5)、測試

# ansible storm_cluster -m ping

三、ansible常用模塊介紹

==========================================================================================

根據zs官方的分類,將模塊按功能分類為:雲模塊、命令模塊、數據庫模塊、文件模塊、資產模塊、消息模塊、監控模塊、網絡模塊、通知模塊、包管理模塊、源碼控制模塊、系統模塊、單元模塊、web設施模塊、windows模塊 這裏從官方分類的模塊裏選擇最常用的一些模塊進行介紹。

一、ping模塊

測試主機是否是通的,用法很簡單,不涉及參數:

 ansible test -m ping

二、setup模塊

setup模塊,主要用於獲取主機信息,在playbooks裏經常會用到的一個參數gather_facts就與該模塊相關。setup模塊下經常使用的一個參數是filter參數,具體使用示例如下:

ansible 10.212.52.252 -m setup -a ‘filter=ansible_*_mb‘   //查看主機內存信息
ansible 10.212.52.252 -m setup -a ‘filter=ansible_eth[0-2]‘ //查看地接口為eth0-2的網卡信息
ansible all -m setup --tree /tmp/facts //將所有主機的信息輸入到/tmp/facts目錄下,每臺主機的信息輸入到主機名文件中(/etc/ansible/hosts裏的主機名)

三、file模塊

file模塊主要用於遠程主機上的文件操作,file模塊包含如下選項:

  • force:需要在兩種情況下強制創建軟鏈接,一種是源文件不存在但之後會建立的情況下;另一種是目標軟鏈接已存在,需要先取消之前的軟鏈,然後創建新的軟鏈,有兩個選項:yes|no

  • group:定義文件/目錄的屬組

  • mode:定義文件/目錄的權限

  • owner:定義文件/目錄的屬主

  • path:必選項,定義文件/目錄的路徑

  • recurse:遞歸的設置文件的屬性,只對目錄有效

  • src:要被鏈接的源文件的路徑,只應用於state=link的情況

  • dest:被鏈接到的路徑,只應用於state=link的情況

  • state:

    • directory:如果目錄不存在,創建目錄

    • file:即使文件不存在,也不會被創建

    • link:創建軟鏈接

    • hard:創建硬鏈接

    • touch:如果文件不存在,則會創建一個新的文件,如果文件或目錄已存在,則更新其最後修改時間

    • absent:刪除目錄、文件或者取消鏈接文件

使用示例:

    ansible test -m file -a "src=/etc/fstab dest=/tmp/fstab state=link"
ansible test -m file -a "path=/tmp/fstab state=absent"
ansible test -m file -a "path=/tmp/test state=touch"

四、copy模塊

復制文件到遠程主機,copy模塊包含如下選項:

  • backup:在覆蓋之前將原文件備份,備份文件包含時間信息。有兩個選項:yes|no

  • content:用於替代"src",可以直接設定指定文件的值

  • dest:必選項。要將源文件復制到的遠程主機的絕對路徑,如果源文件是一個目錄,那麽該路徑也必須是個目錄

  • directory_mode:遞歸的設定目錄的權限,默認為系統默認權限

  • force:如果目標主機包含該文件,但內容不同,如果設置為yes,則強制覆蓋,如果為no,則只有當目標主機的目標位置不存在該文件時,才復制。默認為yes

  • others:所有的file模塊裏的選項都可以在這裏使用

  • src:要復制到遠程主機的文件在本地的地址,可以是絕對路徑,也可以是相對路徑。如果路徑是一個目錄,它將遞歸復制。在這種情況下,如果路徑使用"/"來結尾,則只復制目錄裏的內容,如果沒有使用"/"來結尾,則包含目錄在內的整個內容全部復制,類似於rsync。

  • validate :The validation command to run before copying into place. The path to the file to validate is passed in via ‘%s‘ which must be present as in the visudo example below.

示例如下:

ansible test -m copy -a "src=/srv/myfiles/foo.conf dest=/etc/foo.conf owner=foo group=foo mode=0644"
ansible test -m copy -a "src=/mine/ntp.conf dest=/etc/ntp.conf owner=root group=root mode=644 backup=yes"
ansible test -m copy -a "src=/mine/sudoers dest=/etc/sudoers validate=‘visudo -cf %s‘"

五、service模塊

用於管理服務
該模塊包含如下選項:

  • arguments:給命令行提供一些選項

  • enabled:是否開機啟動 yes|no

  • name:必選項,服務名稱

  • pattern:定義一個模式,如果通過status指令來查看服務的狀態時,沒有響應,就會通過ps指令在進程中根據該模式進行查找,如果匹配到,則認為該服務依然在運行

  • runlevel:運行級別

  • sleep:如果執行了restarted,在則stop和start之間沈睡幾秒鐘

  • state:對當前服務執行啟動,停止、重啟、重新加載等操作(started,stopped,restarted,reloaded)

使用示例:

ansible test -m service -a "name=httpd state=started enabled=yes"
asnible test -m service -a "name=foo pattern=/usr/bin/foo state=started"
ansible test -m service -a "name=network state=restarted args=eth0"

六、cron模塊

用於管理計劃任務包含如下選項:

  • backup:對遠程主機上的原任務計劃內容修改之前做備份

  • cron_file:如果指定該選項,則用該文件替換遠程主機上的cron.d目錄下的用戶的任務計劃

  • day:日(1-31,*,*/2,……)

  • hour:小時(0-23,*,*/2,……)

  • minute:分鐘(0-59,*,*/2,……)

  • month:月(1-12,*,*/2,……)

  • weekday:周(0-7,*,……)

  • job:要執行的任務,依賴於state=present

  • name:該任務的描述

  • special_time:指定什麽時候執行,參數:reboot,yearly,annually,monthly,weekly,daily,hourly

  • state:確認該任務計劃是創建還是刪除

  • user:以哪個用戶的身份執行

示例:

ansible test -m cron -a ‘name="a job for reboot" special_time=reboot job="/some/job.sh"‘
ansible test -m cron -a ‘name="yum autoupdate" weekday="2" minute=0 hour=12 user="root
ansible test -m cron -a ‘backup="True" name="test" minute="0" hour="5,2" job="ls -alh > /dev/null"‘
ansilbe test -m cron -a ‘cron_file=ansible_yum-autoupdate state=absent‘

七、yum模塊

使用yum包管理器來管理軟件包,其選項有:

  • config_file:yum的配置文件

  • disable_gpg_check:關閉gpg_check

  • disablerepo:不啟用某個源

  • enablerepo:啟用某個源

  • name:要進行操作的軟件包的名字,也可以傳遞一個url或者一個本地的rpm包的路徑

  • state:狀態(present,absent,latest)

示例如下:

ansible test -m yum -a ‘name=httpd state=latest‘
ansible test -m yum -a ‘name="@Development tools" state=present‘
ansible test -m yum -a ‘name=http://nginx.org/packages/centos/6/noarch/RPMS/nginx-release-centos-6-0.el6.ngx.noarch.rpm state=present‘

八、user模塊與group模塊

user模塊是請求的是useradd, userdel, usermod三個指令,goup模塊請求的是groupadd, groupdel, groupmod 三個指令。

1、user模塊

  • home:指定用戶的家目錄,需要與createhome配合使用

  • groups:指定用戶的屬組

  • uid:指定用的uid

  • password:指定用戶的密碼

  • name:指定用戶名

  • createhome:是否創建家目錄 yes|no

  • system:是否為系統用戶

  • remove:當state=absent時,remove=yes則表示連同家目錄一起刪除,等價於userdel -r

  • state:是創建還是刪除

  • shell:指定用戶的shell環境

使用示例:
user: name=johnd comment="John Doe" uid=1040 group=admin
user: name=james shell=/bin/bash groups=admins,developers append=yes user: name=johnd state=absent remove=yes
user: name=james18 shell=/bin/zsh groups=developers expires=1422403387
user: name=test generate_ssh_key=yes ssh_key_bits=2048 ssh_key_file=.ssh/id_rsa #生成密鑰時,只會生成公鑰文件和私鑰文件,和直接使用ssh-keygen指令效果相同,不會生成authorized_keys文件。

註:指定password參數時,不能使用明文密碼,因為後面這一串密碼會被直接傳送到被管理主機的/etc/shadow文件中,所以需要先將密碼字符串進行加密處理。然後將得到的字符串放到password中即可。

echo "123456" | openssl passwd -1 -salt $(< /dev/urandom tr -dc ‘[:alnum:]‘ | head -c 32) -stdin
$1$4P4PlFuE$ur9ObJiT5iHNrb9QnjaIB0
#使用上面的密碼創建用戶
ansible all -m user -a ‘name=foo password="$1$4P4PlFuE$ur9ObJiT5iHNrb9QnjaIB0"‘

不同的發行版默認使用的加密方式可能會有區別,具體可以查看/etc/login.defs文件確認,centos 6.5版本使用的是SHA512加密算法。

2、group示例

ansible all -m group -a ‘name=somegroup state=present‘

九、synchronize模塊

使用rsync同步文件,其參數如下:

  • archive: 歸檔,相當於同時開啟recursive(遞歸)、links、perms、times、owner、group、-D選項都為yes ,默認該項為開啟

  • checksum: 跳過檢測sum值,默認關閉

  • compress:是否開啟壓縮

  • copy_links:復制鏈接文件,默認為no ,註意後面還有一個links參數

  • delete: 刪除不存在的文件,默認no

  • dest:目錄路徑

  • dest_port:默認目錄主機上的端口 ,默認是22,走的ssh協議

  • dirs:傳速目錄不進行遞歸,默認為no,即進行目錄遞歸

  • rsync_opts:rsync參數部分

  • set_remote_user:主要用於/etc/ansible/hosts中定義或默認使用的用戶與rsync使用的用戶不同的情況

  • mode: push或pull 模塊,push模的話,一般用於從本機向遠程主機上傳文件,pull 模式用於從遠程主機上取文件

使用示例:

    src=some/relative/path dest=/some/absolute/path rsync_path="sudo rsync"
src=some/relative/path dest=/some/absolute/path archive=no links=yes
src=some/relative/path dest=/some/absolute/path checksum=yes times=no
src=/tmp/helloworld dest=/var/www/helloword rsync_opts=--no-motd,--exclude=.git mode=pull

十、filesystem模塊

在塊設備上創建文件系統
選項:

  • dev:目標塊設備

  • force:在一個已有文件系統 的設備上強制創建

  • fstype:文件系統的類型

  • opts:傳遞給mkfs命令的選項

示例:

ansible test -m filesystem -a ‘fstype=ext2 dev=/dev/sdb1 force=yes‘

ansible test -m filesystem -a ‘fstype=ext4 dev=/dev/sdb1 opts="-cc"‘

十一、mount模塊

配置掛載點
選項:

  • dump

  • fstype:必選項,掛載文件的類型

  • name:必選項,掛載點

  • opts:傳遞給mount命令的參數

    src:必選項,要掛載的文件

    state:必選項

    present:只處理fstab中的配置
    absent:刪除掛載點
    mounted:自動創建掛載點並掛載之
    umounted:卸載

示例:

    name=/mnt/dvd src=/dev/sr0 fstype=iso9660 opts=ro state=present
name=/srv/disk src=‘LABEL=SOME_LABEL‘ state=present
name=/home src=‘UUID=b3e48f45-f933-4c8e-a700-22a159ec9077‘ opts=noatime state=present
    ansible test -a ‘dd if=/dev/zero of=/disk.img bs=4k count=1024‘
ansible test -a ‘losetup /dev/loop0 /disk.img‘
ansible test -m filesystem ‘fstype=ext4 force=yes opts=-F dev=/dev/loop0‘
ansible test -m mount ‘name=/mnt src=/dev/loop0 fstype=ext4 state=mounted opts=rw‘

十二、get_url 模塊

該模塊主要用於從http、ftp、https服務器上下載文件(類似於wget),主要有如下選項:

  • sha256sum:下載完成後進行sha256 check;

  • timeout:下載超時時間,默認10s

  • url:下載的URL

  • url_password、url_username:主要用於需要用戶名密碼進行驗證的情況

  • use_proxy:是事使用代理,代理需事先在環境變更中定義

示例:

    get_url: url=http://example.com/path/file.conf dest=/etc/foo.conf mode=0440
get_url: url=http://example.com/path/file.conf dest=/etc/foo.conf sha256sum=b5bb9d8014a0f9b1d61e21e796d78dccdf1352f23cd32812f4850b878ae4944c

十三、unarchive模塊

用於解壓文件,模塊包含如下選項:

  • copy:在解壓文件之前,是否先將文件復制到遠程主機,默認為yes。若為no,則要求目標主機上壓縮包必須存在。

  • creates:指定一個文件名,當該文件存在時,則解壓指令不執行

  • dest:遠程主機上的一個路徑,即文件解壓的路徑

  • grop:解壓後的目錄或文件的屬組

  • list_files:如果為yes,則會列出壓縮包裏的文件,默認為no,2.0版本新增的選項

  • mode:解決後文件的權限

  • src:如果copy為yes,則需要指定壓縮文件的源路徑

  • owner:解壓後文件或目錄的屬主

示例如下:

- unarchive: src=foo.tgz dest=/var/lib/foo
- unarchive: src=/tmp/foo.zip dest=/usr/local/bin copy=no
- unarchive: src=https://example.com/example.zip dest=/usr/local/bin copy=no


三、ansible playbook

==========================================================================================

1、創建文件實例

(1)、編輯配置文件

[[email protected] ~]# cd /etc/ansible/

[[email protected] ansible]# vim test.yaml //固定後綴為yaml,一定要註意空格

---

- hosts: testhost

  user: root

  tasks:

    - name: playbook_test

      shell: touch /tmp/playbook.txt


hosts參數指定了對哪些主機進行參作;註意:

user參數指定了使用什麽用戶登錄遠程主機操作;

tasks指定了一個任務,其下面的name參數同樣是對任務的描述,在執行過程中會打印出來。

(2)、執行配置文件

[[email protected] ansible]# ansible-playbook test.yml

1、playbook安裝etcd詳細示例

(1)、先配置需要在哪些機器上安裝etcd,編輯/etc/ansible/hosts如下.

[[email protected] ~]$ cat /etc/ansible/hosts 
# This is the default ansible ‘hosts‘ file.
#
# It should live in /etc/ansible/hosts
#
#   - Comments begin with the ‘#‘ character
#   - Blank lines are ignored
#   - Groups of hosts are delimited by [header] elements
#   - You can enter hostnames or ip addresses
#   - A hostname/ip can be a member of multiple groups

[etcd_host]
10.1.4.59

(2)、編寫playbook  

  建立測試目錄

[[email protected] test]$ ll
總用量 4
-rw-rw-r-- 1 dc dc 237 6月  13 10:50 _etcd.yaml
drwxrwxr-x 2 dc dc  25 6月  13 11:02 group_vars
drwxrwxr-x 3 dc dc  17 6月  13 10:52 roles

  其中_etcd.yaml就是我們要的劇本,roles目錄下面是配合腳本運行的文件,查看目錄結構

[[email protected] test]$ du roles/
9924	roles/etcd/files
4	roles/etcd/tasks
4	roles/etcd/templates
9932	roles/etcd
9932	roles/

  其中templates文件夾中放一些配置文件,files中放一些需要的文件,比如安裝包等

[[email protected] test]$ cat _etcd.yaml 
---
  # update hosts files of all nodes 
 - hosts: etcd_host  #指定要操作的主機
   remote_user: root  #指定要登錄的賬戶
   become_method: sudo
   name: "install and copy etcd file and start service"
   vars_files:
      - group_vars/hostmap.yaml #要導入的變量文件,如果需要變量文件,此處添加
   roles:
      - role: etcd

  查看運行的腳本步驟:

[[email protected] test]$ cat roles/etcd/tasks/main.yaml 
- name: create work dir
  file: state=directory path={{work_dir}}
- name: copy etcd.tar.gz
  copy: src={{etcd_tar}}.tar.gz dest={{work_dir}}{{etcd_tar}}.tar.gz
- name: unzip etcd
  unarchive: src={{work_dir}}{{etcd_tar}}.tar.gz dest={{work_dir}} copy=no
- name: copy shell etcd
  command: cp {{work_dir}}{{etcd_tar}}/etcd /usr/bin/
- name: copy shell etcdctl
  command: cp {{work_dir}}{{etcd_tar}}/etcdctl /usr/bin/
- name: create service
  copy: src=etcd.service dest=/usr/lib/systemd/system/etcd.service
- name: change etcd conf
  template: src=etcd.conf dest=/etc/etcd/etcd.conf
- name: start etcd service
  service: name=etcd state=restarted enabled=yes

  這些命令跟上面介紹的模塊命令基本一致,所有命令都有-name來說明用處,補充說明:

1.{{work_dir}}表示引用group_vars/hostmap.yaml中有配置的參數

2.命令中template: src=etcd.conf表示從templates中拷貝配置文件到指定目錄,templates文件夾中的文件也可以動態引用全局參數.

  執行劇本:

[[email protected] test]# ansible-playbook _etcd.yaml 

PLAY [install and copy etcd file and start service] *******************************************************************************************************************************************

TASK [Gathering Facts] ************************************************************************************************************************************************************************
ok: [10.1.4.59]

TASK [etcd : create work dir] *****************************************************************************************************************************************************************
ok: [10.1.4.59]

TASK [etcd : copy etcd.tar.gz] ****************************************************************************************************************************************************************
ok: [10.1.4.59]

TASK [etcd : unzip etcd] **********************************************************************************************************************************************************************
ok: [10.1.4.59]

TASK [etcd : copy shell etcd] *****************************************************************************************************************************************************************
changed: [10.1.4.59]

TASK [etcd : copy shell etcdctl] **************************************************************************************************************************************************************
changed: [10.1.4.59]

TASK [etcd : create service] ******************************************************************************************************************************************************************
ok: [10.1.4.59]

TASK [etcd : change etcd conf] ****************************************************************************************************************************************************************
ok: [10.1.4.59]

TASK [etcd : start etcd service] **************************************************************************************************************************************************************
changed: [10.1.4.59]

PLAY RECAP ************************************************************************************************************************************************************************************
10.1.4.59                  : ok=9    changed=3    unreachable=0    failed=0 

  因為這邊已經安裝過一遍,所以changed=3,到此就安裝完成了.

參考資料:

  http://www.mamicode.com/info-detail-1240734.html

  http://breezey.blog.51cto.com/2400275/1555530/

  http://blog.csdn.net/fruitful_life/article/details/53195478

ansible示例,離線安裝etcd