2. 程式人生 > >linux日常筆記-01

linux日常筆記-01

阿新 • • 發佈：2018-02-02
多參數 btrfs copy aps gre editor 正則表達 搜索 ubunt

1.Openstack

   監控工具：zabbix

   大數據處理：Hadoop ,Spark ,Storm,elk

Docker
Python

  1. RHCSA, RHCE, RHCA(認證)
    Linux發行版：
    Slackware:
    Suse, Opensuse

    Debian:
    Ubuntu, mint

    Redhat:
    Rhel, fedora, centos

    Archlinux

    Gentoo

    LFS:linux from scratch

3.程序包管理器:
rpm:
RHEL, Fedora, Suse, CnetOS

dpt:
Debian, Ubuntu

區別內外部命令：
#：type command

/usr: (universal shared read-only data)

4.set -C 禁止將內容覆蓋輸出至已有文件中

 tr 轉換或刪除字符

5.Linux文本處理三劍客：
grep:文本過濾工具（grep,egrep,fgrep）

  sed:stream editor,文本編輯工具

  awk:linux上實現gawk,文本報告生成器

 grep:global search regular expression and print out the line
 作用：文本搜索工具，根據用戶指定的“模式”對目標文本逐行進行匹配檢查：打印匹配到的行
 模式：由正則表達式字符及文本字符所編寫的過濾條件

6.只讀變量：
readonly name , declare –r name

7.自定義退出碼：
exit [n]

8.Vim編輯
(行號)
set nu
set nonu
(括號匹配)
set sm
set nosm
(自動縮進)
set ai
set noai
(高亮搜索)
set hlsearch set nohlsearch
(語法高亮)
syntax on syntax off
(忽略字符的大小寫)
set ic set noic

9.bash 條件測試

[ expression ] [[ expression ]]
組合條件測試：
第一種方式;
command1 && command2

command1 || command2
! command
[ -e file ] && [ -r file ]
第二種方式：
expression1 –a Expression2
expression1 –o Expression2
! expression
必須使用測試命令進行：
eg: [ -f /bin/cat –a –x /bin/cat ] && cat /etc/fatab

10.文件查找:
locate,find
locate:查找速度快，模糊查找，非實時查找
locate keyword
find:查找速度略慢，精確查找，實時查找
find [option] … [查找路徑] [查找條件][處理動作]
組合條件：
與： -a
或： -o
非: -not,!
!A –a !B = !(A –o B)
!A –o !B= !(A –a B)
eg:find /tmp ( -not –user root –a –not –name ‘fstab’ ) –ls
find /tmp -not ( -user root -o -name ‘fstab’ ) –ls
根據文件大小查找：
-size [+|-] #UNIT
常用單位：k,M,G
根據時間戳：
以天為單位：
-atime, -mtime, -ctime
以分鐘為單位：
-amin, -mmin, -cmin
根據權限查找：
-perm [+|-]MODE
處理動作：
-print:默認的處理動作，顯示至屏幕
-ls:類似於對查找到的文件執行“ls -l”命令
-delete:刪除查找到的文件
-ok COMMAND {}\; 對查找到的每個文件執行由COMMAND指定的命令:對於每個文件執行前都會進行交互；
-exec COMMAND {}\; 對查找到的每個文件執行由COMMAND指定的命令；
註意：有些命令不能接受過多參數，此時命令執行時可能會出錯，下面方法可規避此問題：
find |xargs COOMAND
eg：find /etc -size +1M -type -f
find / -nouser –a -nogroup -a -atime -7
find /etc -not -perm +222

11.Linux磁盤管理：
磁盤管理，文件系統管理
RAID基礎原理、LVM2
網絡管理：TCP/IP協議、linux網絡屬性配置
程序包管理：rpm、yum
進程管理：htop、glance、tsar
Sed和awk
I/O Ports: I/O設備地址；
一切皆文件；

12.硬盤接口類型：
並行：
IDE：133MB/s
SCSI:640MB/s
串口：
SATA:6Gbps
SAS:6Gbps
USB:480MB/s
/dev/DEV_FILE 磁盤設備的設備文件命名：
IDE：/dev/hd…
SCSI,SATA,SAS,USB:/dev/sd…

  1. 查看內核是否已經識別新的分區：
    cat /proc/partitions
    通知內核重新讀取硬盤分區表：
    partx -a /dev/DEVICE
    -n M:N
    kpartx -a /dev/DEVICE
    -f force
    centos 5:使用partprobe
    Partprobe [/dev/DEVICE]

14.創建文件系統：
mkfs命令：
(1)Mkfs.FS_type /dev/DEVICE
(ext4,xfs,btrfs,vfat)
(2)mkfs -t FS_TYPE /dev/DEVICE
-L ‘LABEL’:卷標
mke2fs : ext系列文件系統專用管理工具
-t {ext2|ext3|ext4}
-b{1024|2048|4096}
-L ‘LABEL’
-j :相當於 –t ext3
mkfs.ext3 = mkfs -t ext3 = mke2fs -j = mke2fs -t ext3
-i #:為數據空間每多少個字節創建一個inode,此大小不應該小於block的大小
-N #:為數據空間創建了多少個inode
-m #:為管理人員預留的空間占據的百分比
mkswap：創建交換分區
mkswap [options] device
-L ‘LABEL’
前提：調整其分區的ID為82
其他常用工具：
Blkid:塊設備屬性信息查看
Blkid [OPTION] …[DEVICE]
-U UUID:根據指定的UUIDl來查找對應的設備
-L LABEL:根據指定的LABEL來查找對應的設備
e2label:管理ext系列文件系統的LABEL
#e2label DEVICE [LABEL]
tune2fs:重新設定ext系列文件系統可調整參數的值
-l：查看指定文件系統的超級塊信息：super block
-L ‘LABEL’:修改卷標
-m #:修改預留給管理員的空間百分比
-j:將ext2升級為ext3
-O:文件系統屬性啟用或禁用
-o:調整文件系統的默認掛載選項
-U UUID:修改UUID號
dumpe2fs:
-h:查看超級塊信息

  1. 文件系統檢測：
    fsck:file system check
    fsck.FS_TYPE
    fsck –t FS_TYPE
    -a:自動修復錯誤
    -r:交互式修復錯誤
    note:FS_TYPE一定要與分區上已有的文件類型相同
    e2fsck:ext系列文件專用的檢測修復工具
    -y :自動回答為yes
    -f :強制修復

16.文件系統掛載：
mount DEVICE MOUNT_POINT
mount:顯示當前系統已掛載的所有設備
mount [-fnrsvw] [-t vfstype] [-o options] device dir
device:指明要掛載的設備：
(1) 設備文件：例如/dev/sda4
(2) 卷標： -L LABEL
(3) UUID,-U UUID
(4) 偽文件系統名稱
dir:掛載點
事先存在，建議使用空目錄
常用選項：
-t vsftype:指定要掛載的設備上的文件系統的類型：
-r readonly
-w read and write
-n 不更新/etc/mtab
-a 自動掛載所有支持自動掛載的設備（定義在/etc/fstab文件中）
-L LABEL 以卷標指定掛載設備
-U UUID 以UUID指定要掛載的設備
註意：查看內核追蹤到的自己掛載的所有設備：cat /proc/mounts
-o options (掛載文件系統的選項)
async:異步模式
sync: 同步模式
atime/noatime:包含目錄和文件
diratime/nodiratime:目錄的訪問時間戳
auto/noauto:是否支持自動掛載
exec/noexec:是否支持將文件系統上的應用程序運行為進程
dev/nodev:是否支持在此文件系統上使用設備文件
remount；重新掛載
卸載命令：
umount
查看正在訪問指定文件系統的進程：
fuser -v mount_point
終止所有在訪問指定文件系統的進程：
fuser -km mount_point
掛載交換分區：
啟用：swapon [OPTION] …[DEVICE]
-a:激活所有的交換分區
-p PRIORITY:指定優先級
禁用：swapoff [OPTION]…[DEVICE]
內存空間使用狀態：
free [OPTION]
-m | -g

17.bash腳本編程之用戶交互：
read [option] … [name …]
-p PROMPT
-t TIMEOUT
bash -n /path/to/some_script
檢測腳本中的語法錯誤
bash -x /path/to/some_script
調試執行

18.RAID:
Redundant Arrays of Inexpensive Disks
提高IO能力：
磁盤並行讀寫
提高耐用性：
磁盤冗余
級別:多塊磁盤組織在一起的工作方式有所不同
RAID實現的方式:
外接式磁盤陣列：通過擴展卡提供適配能力
內接式RAID:主板集成RAID控制器
Software RAID：
級別：level
RAID—0:
RAID—1:
RAID—2:
…
RAID—5:
RAID—6:
RAID—10:
RAID—01:
RAID—0：
讀、寫性能提升：
可用空間：Nmin(S1,S2…)
無容錯能力
最少磁盤數：2,2+
RAID—1：
讀性能提升寫性能略有下降：
可用空間：1min(S1,S2…)
有冗余能力
最少磁盤數：2,2+
RAID—5：
讀、寫性能提升：
可用空間：(N-1)min(S1,S2…)
有容錯能力：一塊磁盤
最少磁盤數：3,3+
RAID—6：
讀、寫性能提升：
可用空間：(N-2)min(S1,S2…)
有容錯能力：2塊磁盤
最少磁盤數：4,4+
混合類型：
RAID—10:
讀、寫性能提升：
可用空間：N*min(S1,S2…) /2
有容錯能力：每組鏡像最多只能壞一塊
最少磁盤數：4,4+
RAID—01:
RAID—50:
JBOD:
將多塊磁盤的空間合並成一個大的連續空間使用
實現方式：
硬件實現方式、軟件實現方式
Centos 6上的軟件RAID的實現：
結合內核中的md(multi devices)
Mdadm:模式化工具
格式：mdadm [mode] <raiddevice> <component-device>
支持的RAID級別：
LINEAR, RAID0,RAID1,RAID4,RAID5,RAID6,RAID10等
模式：
創建：-C
裝配：-A
監控：-F
管理：-f,-r,-a
<raiddevice>:/dev/md#
<component-devices>:任意塊設備
-C：創建模式
-n # :使用n個塊設備來創建此RAID
-l #:指明要創建的RAID級別
-a {yes|no}:自動創建目標RAID設備的設備文件
-c CHUNK_SIZE:指明塊大小
-x #:指明空間盤的個數
-D:顯示RAID的詳細信息
mdadm –D /dev/md#
管理模式：
-f:標記指定磁盤為損壞
-a:添加磁盤
-r:移除磁盤
觀察md的狀態:
cat /proc/mdstat
停止md設備：
mdadm -S /dev/md#
watch命令:
-n #:刷新間隔，單位是秒：
Watch -n# ‘COMMAND’

19.LVM2
LVM:Logical Volume Manager Version 2
dm:device mapper:將一個或多個底層塊設備組織成一個邏輯設備的模塊
pv管理工具：
pvs:簡要pv信息顯示
pvdisplay；顯示pv的詳細信息
pvcreate /dev/DEVICE:創建pv
vg管理工具：
vgs
vgdisplay
vgcreate
vgextend
vgremove
lv管理工具：
lvs
lvdisplay
lvcreate -L #[mMgGtT] -n NAME VolumeGroup
lvremove /dev/VG_NAME/LV_NAME
擴展邏輯卷：
lvextend -L [+]#[mMgGtT] /dev/VG_NAME/LV_NAME
resize2fs /dev/VG_NAME/LV_NAME
縮減邏輯卷：
umount /dev/VG_NAME/LV_NAME
e2fsck –f /dev/VG_NAME/LV_NAME
resize2fs /dev/VG_NAME/LV_NAME #[mMgGtT]
lvreduce -L [-]#[mMgGtT] /dev/VG_NAME/LV_NAME
mount
快照：snapshot
lvcreate –L #[mMgGtT] –p r -s –n snapshot_lv_name original_lv_name

  1. dd命令: convert and copy a file
    dd if =/PAATH/FROM/SRC of=/PATH/TO/DEST
    bs -#:block size,復制單元大小
    count-#:復制多少個bs
    磁盤拷貝：
    dd if=/dev/sda of=/dev/sdb
    備份MBR：
    dd if=/dev/sda of=/tmp/mbr.bak bs=512 count=1
    破壞MBR中的bootloader
    dd if=/dev/zero of=/dev/sda bs=512 count=1
    兩個特殊設備:
    /dev/null:數據黑洞
    /dev/zero:吐零機

21.btrfs文件系統：
文件系統的創建:
mkfs.btrfs
-L ‘LABEL’
-d <type>: raid 0 等
-m <profile> : raid 0 raid 1 等
-O<feature>
-O list-all:列出支持的所有feature
屬性查看：
btrfs filesystem show
掛載文件系統：
mount -t btrfs /dev/sdb MOUNT_POINT

     列表生成方式：
     （1）    直接給出列表
     （2）    整數列表
           （a）{start…end}
           （b）$(seq [start [step]  end])
     （3）返回列表命令：
               $(COMMAND)

22.Linux程序包管理：
API：Application Programming Interface
POSIX: Portable OS
程序源代碼?預處理?編譯?匯編?鏈接
靜態編譯
共享編譯
ABI:Application Binary Interface
Windows與Linux不兼容
庫級別的虛擬化:
Linux:WINE
Windows:Cywin
系統級開發：c,c++
應用級開發：java,Python,php,perl,ruby
二進制應用程序的組成部分：
二進制文件，庫文件，配置文件，幫助文件
程序包管理器：
Debian:deb,dpt
Redhat:rpm

23.查看二進制程序所依賴的庫文件：
Idd /PATH/TO/BINARY_FILE
管理及查看本機裝載的庫文件：
Idconfig
/sbin/Idconfig -p :顯示本機已經緩存的所有可用庫文件名及文件路徑映射關系
配置文件為： /etc/Id.so.conf,/etc/Id.so.conf.d/*.conf
緩存文件：/etc/Id.so.cache
程序包管理：
功能：將編譯好的應用程序的各組成文件打包一個或幾個程序包文件，從而方便快捷地實現
程序包的安裝、卸載、查詢、升級和校驗等管理操作
管理程序包的方式：
使用包管理器：rpm
使用前端工具：yum、dnf
man rpm
包來源性驗證及合法性驗證：
完整性驗證:
公鑰加密：
對稱加密：加密、解密使用同一密鑰
非對稱加密：密鑰成對（公鑰、私鑰）
導入所需要公鑰：
rpm --import /PATH/FROM/GPG_PUBKEY_FILE

24.數據庫重建：
rpm {--initdb|--rebuilddb}
Initdb:初始化
如果事先不存在數據庫，則新建之；否則，不執行任何操作
rebuilddb:重建
無論當前存在與否，直接重新創建數據庫

25.編譯C源代碼：
第一步：configure腳本
--help
選項分類：
安裝路徑設定：
--prefix=/PATH/TO/SOMEWHERE :指定默認安裝位置
--sysconfdir=/PATH/To/SOMEWHERE:配置文件安裝位置
第二步：make
第三步：make install
安裝後的配置：
(1) 導出二進制程序目錄至PATH環境變量中:
編輯文件 /etc/profile.d/NAME.sh
export PATH=/PATH/TO/BIN
(2) 導出庫文件路徑
編輯 /etc/ld.so.conf.d/NAME.conf
添加新的庫文件所在目錄至此文件中
讓系統重新生成緩存：
Idconfig [-v]
(3) 導出頭文件：
基於鏈接的方式實現：
In -sv
(4) 導出幫助手冊
(5) 編輯/etc/man.conf文件
(6) 添加一個MANPATH

linux日常筆記-01

相關推薦

linux日常筆記-01

多參數 btrfs copy aps gre editor 正則表達 搜索 ubunt 1.Openstack 監控工具：zabbix 大數據處理：Hadoop ,Spark ,Storm,elk DockerPython RHCSA, RHCE, RH

Linux日常筆記-2

cal 執行 grub2 tty 存在 rto 常用 oot 目錄 一、命令行基礎 1. 命令格式 基本用法 命令字 [選項] … [參數1] [參數2]… [ ] 表示裏面的內容可有可無 在執行一個命令的時候，命令字必須存在，選項和參數可有可無 命令字 選項 參

linux日常筆記1

linux筆記1Linux核心秘籍1. Linux系統嚴格區分大小寫2. Linux一切皆文件3. Linux命令之間需要空格網絡運維課程大綱 Windows 網絡技術(思科、華為) Linux1.計算機由硬件和軟件組成硬件：看得見，摸得著（顯示器/鍵盤/鼠標/機箱/主板/cpu/內存/硬盤...）軟件： 系

linux日常筆記2

linux日常筆記2DAY01 Linux系統的初次體驗Linux介紹Linux系統安裝（CentOS 7.4）Linux系統的操作界面 1）圖形桌面 2）命令行操作環境配置網絡DAY02 玩轉Linux命令行管理目錄和文件使用vim編輯器去創建及修改文件管理用戶和組賬號一、命令行基礎1. 命令格

linux日常筆記5

linux日常筆記5一、構建LAMP平臺1. 什麽是LAMP網站：一個和多個網頁所組成的編寫網站的語言： PHP、Python、perl、Java、.net ...數據庫： Oracle、MySQL、Sql Server ...Web服務器： Apache、Nginx、IIS ...操作系統： Linux、W

linux日常筆記3

linux日常筆記3一、管理權限和歸屬1.權限概述文檔歸屬所有者(u)：擁有此文件/目錄的用戶-user所屬組(g)：擁有此文件/目錄的組-group其他用戶(o)：除所有者、所屬組以外的用戶-other訪問權限讀取(r)：允許查看內容-read寫入(w)：允許修改內容-write可執行(x)：允許運行和切換

linux日常筆記4

linux日常筆記4一、配置軟件倉庫1.yum簡介基於rpm軟件包的安裝部署機制自動解決軟件包的依賴關系需要先配置軟件倉庫2.配置本地的軟件倉庫a.放入centos7.iso鏡像文件到光驅中，確保電源開啟b.命令操作# umount /dev/cdrom# ls /mnt# mount /dev/cdrom

Linux學習筆記01

Linux學習筆記01學習路徑： 1, 基礎(RHCE) RH033RH133RH253 2,RHCA: RH401RH423(LDAP)RH442RH436RHS3333,MySql：RH436：集群，存儲NoSQL安裝Linux: Linux學習筆記01

Linux學習筆記01——解決安裝centos7後無法上網問題

原因分析： 在虛擬機器中安裝centos7後無法上網，因為centos7預設網絡卡未啟用。    而且在sbin目錄中沒有ifconfig檔案，這是因為centos7已經不使用 ifconfig命令了，已經用ip命令代替；  解決ifconfig不可用：

Linux-學習筆記-01

一、Linux系統簡介 1.Linux發展史 1946年世界上的第一臺計算機就產生了，剛產生出的計算機並沒有作業系統，需要手工輸入 人機矛盾:1. 只能一個人使用 2.人工速度慢於計算 產生作業系統（根據人的需求產生） 1965年麻省理工，ATT，貝爾實驗室去研發一

Linux網絡編程筆記01

linux網絡編程1．計算機聯網的目的1) 使用遠程資源2) 共享信息，程序和數據3) 分布處理2．協議的概念1) 網絡中的任意兩臺計算機之間的通信必須有一些約定（比如， 傳輸速率， 數據格式，出錯檢測機制等），這個約定，我們就稱之為協議2) 在Internet中，最為通用的網絡協議就是TCP/IP協議3)

Linux學習筆記（二十九）日常運維一

日常運維一、查看系統負載w/uptime 查看系統負載 load average後指系統在一分鐘，五分鐘，十五分鐘內的運行狀態，平均有多少服務在運行負載值大於邏輯cpu數就說明超負荷了，數值小於cpu數是理想狀態 cat /proc/cpuinfo 查看cpu核數processor 後的數字就是cpu數量減一

Linux學習筆記（三十）日常運維二

free一、iostat、freeiostat -x 磁盤使用rrqm/s: 每秒進行 merge 的讀操作數目。即 delta(rmerge)/swrqm/s: 每秒進行 merge 的寫操作數目。即 delta(wmerge)/sr/s: 每秒完成

Linux學習筆記（三十一）日常運維三

ifconfig一、linux網絡相關、 ifconfig ifconfig //查看網卡ip（yum install net-tools） ifup ens33/ifdown ens33 //開啟網卡，關閉網卡，只有一個網卡時，一旦關閉了網卡就會斷開遠程鏈接，只能去服務器主機重新打

Linux筆記01：部署FTP服務器

文件共享一、FTP協議FTP協議是一種在互聯網上進行文件傳輸的協議，默認端口20/21端口，端口20用於數據傳輸，21端口用於接受客戶端發出的相關命令和參數 FTP分主動模式和被動模式主動模式：FTP服務器主動向客戶端發起連接請求被動模式：FTP服務器等待客戶端發起連接請求（默認） 二、部署FTP服務器FTP

學習大資料基礎筆記01——Linux入門與基礎

終於等到大三開學了，新學期昨晚才得到朝思暮想的課表，課表裡的有一門行業前沿技術（心想：前沿技術是個啥技術..） 其實是大資料...   好了，我要開始學東西了...（窘迫）  備註：其實操作步驟是看老師來的，哈哈哈..大資料小白 &nb

Linux實戰教學筆記01:計算機硬體組成與基本原理

標籤（空格分隔）： Linux實戰教學筆記 第1章 如何學習Linu 要想學好任何一門學問，不僅要眼睛看，耳朵聽，還要動手記，勤思考，多交流甚至嘗試著去教會別人。 第2章 伺服器 2.1 運維的基本職責： 網站的資料不能丟 網站7*24小時執行

linux shell 學習筆記01

進程 $* echo $? swd mil 條件 shel 個數 總結 1、命令歷史記錄history !$ ：調用上一條命令的執行結果 !100 ：運行history記錄裏的第100條命令 !ser ：調用以ser開頭的最後一次執行的命令 ctrl+r ：

開發板的I/O在哪裡——韋東山嵌入式Linux視訊學習筆記01

一般來說，串列埠就是開發板的I/O（輸入輸出）介面。我們可以通過串列埠向板子傳送命令，也可以通過串列埠把板子的狀態資訊打印出來。 板載串列埠和PC的連線 如果板子上有串列埠，且電腦上也有串列埠，那直接用串列埠線相連就可以。對於沒有串列埠的膝上型電腦，可以

uc筆記01---Unix，Linux，程式構建過程，gcc，標頭檔案，預處理，環境變數配置

1.    Unix 作業系統     1）簡介         美國 AT&T 公司貝爾實驗室，         1971 年，         肯.湯普遜、丹尼斯.裡奇。         多使用者、多工、支援多種處理器架構。         高安全性、高可靠性，