皮皮网
皮皮网

【源码一站】【BINN平台源码】【鞋子推广源码】candump源码

来源:php源码解 发表时间:2024-12-22 00:24:35

1.linux基础命令
2.Linux常用命令大全
3.Linux 应用案例开发手册——基于Xilinx Zynq-7010/7020工业开发板
4.插件崩溃怎么回事怎么解决

candump源码

linux基础命令

       Linux常用命令大全

       ç³»ç»Ÿä¿¡æ¯

       arch 显示机器的处理器架构(1)

       uname -m 显示机器的处理器架构(2)

       uname -r 显示正在使用的内核版本

       dmidecode -q 显示硬件系统部件 - (SMBIOS / DMI)

       hdparm -i /dev/hda 罗列一个磁盘的架构特性

       hdparm -tT /dev/sda 在磁盘上执行测试性读取操作

       cat /proc/cpuinfo 显示CPU info的信息

       cat /proc/interrupts 显示中断

       cat /proc/meminfo 校验内存使用

       cat /proc/swaps 显示哪些swap被使用

       cat /proc/version 显示内核的版本

       cat /proc/net/dev 显示网络适配器及统计

       cat /proc/mounts 显示已加载的文件系统

       lspci -tv 罗列 PCI 设备

       lsusb -tv 显示 USB 设备

       date 显示系统日期

       cal 显示年的日历表

       date . 设置日期和时间 - 月日时分年.秒

       clock -w 将时间修改保存到 BIOS

       å…³æœº (系统的关机、重启以及登出 )

       shutdown -h now 关闭系统(1)

       init 0 关闭系统(2)

       telinit 0 关闭系统(3)

       shutdown -h hours:minutes & 按预定时间关闭系统

       shutdown -c 取消按预定时间关闭系统

       shutdown -r now 重启(1)

       reboot 重启(2)

       logout 注销

       æ–‡ä»¶å’Œç›®å½•

       cd /home 进入 '/ home' 目录'

       cd .. 返回上一级目录

       cd ../.. 返回上两级目录

       cd 进入个人的主目录

       cd ~user1 进入个人的主目录

       cd - 返回上次所在的目录

       pwd 显示工作路径

       ls 查看目录中的文件

       ls -F 查看目录中的文件

       ls -l 显示文件和目录的详细资料

       ls -a 显示隐藏文件

       ls *[0-9]* 显示包含数字的文件名和目录名

       tree 显示文件和目录由根目录开始的树形结构(1)

       lstree 显示文件和目录由根目录开始的树形结构(2)

       mkdir dir1 创建一个叫做 'dir1' 的目录'

       mkdir dir1 dir2 同时创建两个目录

       mkdir -p /tmp/dir1/dir2 创建一个目录树

       rm -f file1 删除一个叫做 'file1' 的文件'

       rmdir dir1 删除一个叫做 'dir1' 的目录'

       rm -rf dir1 删除一个叫做 'dir1' 的目录并同时删除其内容

       rm -rf dir1 dir2 同时删除两个目录及它们的内容

       mv dir1 new_dir 重命名/移动 一个目录

       cp file1 file2 复制一个文件

       cp dir/* . 复制一个目录下的所有文件到当前工作目录

       cp -a /tmp/dir1 . 复制一个目录到当前工作目录

       cp -a dir1 dir2 复制一个目录

       ln -s file1 lnk1 创建一个指向文件或目录的软链接

       ln file1 lnk1 创建一个指向文件或目录的物理链接

       touch -t file1 修改一个文件或目录的时间戳 - (YYMMDDhhmm)

       file file1 outputs the mime type of the file as text

       iconv -l 列出已知的编码

       iconv -f fromEncoding -t toEncoding inputFile > outputFile creates a new from the given input file by assuming it is encoded in fromEncoding and converting it to toEncoding.

       find . -maxdepth 1 -name *.jpg -print -exec convert "{ }" -resize x "thumbs/{ }" \; batch resize files in the current directory and send them to a thumbnails directory (requires convert from Imagemagick)

       æ–‡ä»¶æœç´¢

       find / -name file1 从 '/' 开始进入根文件系统搜索文件和目录

       find / -user user1 搜索属于用户 'user1' 的文件和目录

       find /home/user1 -name \*.bin 在目录 '/ home/user1' 中搜索带有'.bin' 结尾的文件

       find /usr/bin -type f -atime + 搜索在过去天内未被使用过的执行文件

       find /usr/bin -type f -mtime - 搜索在天内被创建或者修改过的文件

       find / -name \*.rpm -exec chmod '{ }' \; 搜索以 '.rpm' 结尾的文件并定义其权限

       find / -xdev -name \*.rpm 搜索以 '.rpm' 结尾的文件,忽略光驱、捷盘等可移动设备

       locate \*.ps 寻找以 '.ps' 结尾的文件 - 先运行 'updatedb' 命令

       whereis halt 显示一个二进制文件、源码或man的位置

       which halt 显示一个二进制文件或可执行文件的完整路径

       æŒ‚载一个文件系统

       mount /dev/hda2 /mnt/hda2 挂载一个叫做hda2的盘 - 确定目录 '/ mnt/hda2' 已经存在

       umount /dev/hda2 卸载一个叫做hda2的盘 - 先从挂载点 '/ mnt/hda2' 退出

       fuser -km /mnt/hda2 当设备繁忙时强制卸载

       umount -n /mnt/hda2 运行卸载操作而不写入 /etc/mtab 文件- 当文件为只读或当磁盘写满时非常有用

       mount /dev/fd0 /mnt/floppy 挂载一个软盘

       mount /dev/cdrom /mnt/cdrom 挂载一个cdrom或dvdrom

       mount /dev/hdc /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount /dev/hdb /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount -o loop file.iso /mnt/cdrom 挂载一个文件或ISO镜像文件

       mount -t vfat /dev/hda5 /mnt/hda5 挂载一个Windows FAT文件系统

       mount /dev/sda1 /mnt/usbdisk 挂载一个usb 捷盘或闪存设备

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share 挂载一个windows网络共享

       ç£ç›˜ç©ºé—´

       df -h 显示已经挂载的分区列表

       ls -lSr |more 以尺寸大小排列文件和目录

       du -sh dir1 估算目录 'dir1' 已经使用的磁盘空间'

       du -sk * | sort -rn 以容量大小为依据依次显示文件和目录的大小

       rpm -q -a --qf '%{ SIZE}t%{ NAME}n' | sort -k1,1n 以大小为依据依次显示已安装的rpm包所使用的空间 (fedora, redhat类系统)

       dpkg-query -W -f='${ Installed-Size;}t${ Package}n' | sort -k1,1n 以大小为依据显示已安装的deb包所使用的空间 (ubuntu, debian类系统)

       è¿”回顶部索引 ^

       ç”¨æˆ·å’Œç¾¤ç»„

       groupadd group_name 创建一个新用户组

       groupdel group_name 删除一个用户组

       groupmod -n new_group_name old_group_name 重命名一个用户组

       useradd -c "Name Surname " -g admin -d /home/user1 -s /bin/bash user1 创建一个属于 "admin" 用户组的用户

       useradd user1 创建一个新用户

       userdel -r user1 删除一个用户 ( '-r' 排除主目录)

       usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 修改用户属性

       passwd 修改口令

       passwd user1 修改一个用户的口令 (只允许root执行)

       chage -E -- user1 设置用户口令的失效期限

       pwck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的用户

       grpck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的群组

       newgrp group_name 登陆进一个新的群组以改变新创建文件的预设群组

       è¿”回顶部索引 ^

       æ–‡ä»¶çš„权限 - 使用 "+" 设置权限,使用 "-" 用于取消

       ls -lh 显示权限

       ls /tmp | pr -T5 -W$COLUMNS 将终端划分成5栏显示

       chmod ugo+rwx directory1 设置目录的所有人(u)、群组(g)以及其他人(o)以读(r )、写(w)和执行(x)的权限

       chmod go-rwx directory1 删除群组(g)与其他人(o)对目录的读写执行权限

       chown user1 file1 改变一个文件的所有人属性

       chown -R user1 directory1 改变一个目录的所有人属性并同时改变改目录下所有文件的属性

       chgrp group1 file1 改变文件的群组

       chown user1:group1 file1 改变一个文件的所有人和群组属性

       find / -perm -u+s 罗列一个系统中所有使用了SUID控制的文件

       chmod u+s /bin/file1 设置一个二进制文件的 SUID 位 - 运行该文件的用户也被赋予和所有者同样的权限

       chmod u-s /bin/file1 禁用一个二进制文件的 SUID位

       chmod g+s /home/public 设置一个目录的SGID 位 - 类似SUID ,不过这是针对目录的

       chmod g-s /home/public 禁用一个目录的 SGID 位

       chmod o+t /home/public 设置一个文件的 STIKY 位 - 只允许合法所有人删除文件

       chmod o-t /home/public 禁用一个目录的 STIKY 位

       è¿”回顶部索引 ^

       æ–‡ä»¶çš„特殊属性 - 使用 "+" 设置权限,使用 "-" 用于取消

       chattr +a file1 只允许以追加方式读写文件

       chattr +c file1 允许这个文件能被内核自动压缩/解压

       chattr +d file1 在进行文件系统备份时,dump程序将忽略这个文件

       chattr +i file1 设置成不可变的文件,不能被删除、修改、重命名或者链接

       chattr +s file1 允许一个文件被安全地删除

       chattr +S file1 一旦应用程序对这个文件执行了写操作,使系统立刻把修改的结果写到磁盘

       chattr +u file1 若文件被删除,系统会允许你在以后恢复这个被删除的文件

       lsattr 显示特殊的属性

       è¿”回顶部索引 ^

       æ‰“包和压缩文件

       bunzip2 file1.bz2 解压一个叫做 'file1.bz2'的文件

       bzip2 file1 压缩一个叫做 'file1' 的文件

       gunzip file1.gz 解压一个叫做 'file1.gz'的文件

       gzip file1 压缩一个叫做 'file1'的文件

       gzip -9 file1 最大程度压缩

       rar a file1.rar test_file 创建一个叫做 'file1.rar' 的包

       rar a file1.rar file1 file2 dir1 同时压缩 'file1', 'file2' 以及目录 'dir1'

       rar x file1.rar 解压rar包

       unrar x file1.rar 解压rar包

       tar -cvf archive.tar file1 创建一个非压缩的 tarball

       tar -cvf archive.tar file1 file2 dir1 创建一个包含了 'file1', 'file2' 以及 'dir1'的档案文件

       tar -tf archive.tar 显示一个包中的内容

       tar -xvf archive.tar 释放一个包

       tar -xvf archive.tar -C /tmp 将压缩包释放到 /tmp目录下

       tar -cvfj archive.tar.bz2 dir1 创建一个bzip2格式的压缩包

       tar -xvfj archive.tar.bz2 解压一个bzip2格式的压缩包

       tar -cvfz archive.tar.gz dir1 创建一个gzip格式的压缩包

       tar -xvfz archive.tar.gz 解压一个gzip格式的压缩包

       zip file1.zip file1 创建一个zip格式的压缩包

       zip -r file1.zip file1 file2 dir1 将几个文件和目录同时压缩成一个zip格式的压缩包

       unzip file1.zip 解压一个zip格式压缩包

       è¿”回顶部索引 ^

       RPM 包 - (Fedora, Redhat及类似系统)

       rpm -ivh package.rpm 安装一个rpm包

       rpm -ivh --nodeeps package.rpm 安装一个rpm包而忽略依赖关系警告

       rpm -U package.rpm 更新一个rpm包但不改变其配置文件

       rpm -F package.rpm 更新一个确定已经安装的rpm包

       rpm -e package_name.rpm 删除一个rpm包

       rpm -qa 显示系统中所有已经安装的rpm包

       rpm -qa | grep mand <> file1_in.txt_or_file1_out.txt general syntax for text manipulation using PIPE, STDIN and STDOUT

       cat file1 | command( sed, grep, awk, grep, etc...) > result.txt 合并一个文件的详细说明文本,并将简介写入一个新文件中

       cat file1 | command( sed, grep, awk, grep, etc...) >> result.txt 合并一个文件的详细说明文本,并将简介写入一个已有的文件中

       grep Aug /var/log/messages 在文件 '/var/log/messages'中查找关键词"Aug"

       grep ^Aug /var/log/messages 在文件 '/var/log/messages'中查找以"Aug"开始的词汇

       grep [0-9] /var/log/messages 选择 '/var/log/messages' 文件中所有包含数字的行

       grep Aug -R /var/log/* 在目录 '/var/log' 及随后的目录中搜索字符串"Aug"

       sed 's/stringa1/stringa2/g' example.txt 将example.txt文件中的 "string1" 替换成 "string2"

       sed '/^$/d' example.txt 从example.txt文件中删除所有空白行

       sed '/ *#/d; /^$/d' example.txt 从example.txt文件中删除所有注释和空白行

       echo 'esempio' | tr '[:lower:]' '[:upper:]' 合并上下单元格内容

       sed -e '1d' result.txt 从文件example.txt 中排除第一行

       sed -n '/stringa1/p' 查看只包含词汇 "string1"的行

       sed -e 's/ *$//' example.txt 删除每一行最后的空白字符

       sed -e 's/stringa1//g' example.txt 从文档中只删除词汇 "string1" 并保留剩余全部

       sed -n '1,5p;5q' example.txt 查看从第一行到第5行内容

       sed -n '5p;5q' example.txt 查看第5行

       sed -e 's/*/0/g' example.txt 用单个零替换多个零

       cat -n file1 标示文件的行数

       cat example.txt | awk 'NR%2==1' 删除example.txt文件中的所有偶数行

       echo a b c | awk '{ print $1}' 查看一行第一栏

       echo a b c | awk '{ print $1,$3}' 查看一行的第一和第三栏

       paste file1 file2 合并两个文件或两栏的内容

       paste -d '+' file1 file2 合并两个文件或两栏的内容,中间用"+"区分

       sort file1 file2 排序两个文件的内容

       sort file1 file2 | uniq 取出两个文件的并集(重复的行只保留一份)

       sort file1 file2 | uniq -u 删除交集,留下其他的行

       sort file1 file2 | uniq -d 取出两个文件的交集(只留下同时存在于两个文件中的文件)

       comm -1 file1 file2 比较两个文件的内容只删除 'file1' 所包含的内容

       comm -2 file1 file2 比较两个文件的内容只删除 'file2' 所包含的内容

       comm -3 file1 file2 比较两个文件的内容只删除两个文件共有的部分

       è¿”回顶部索引 ^

       å­—符设置和文件格式转换

       dos2unix filedos.txt fileunix.txt 将一个文本文件的格式从MSDOS转换成UNIX

       unix2dos fileunix.txt filedos.txt 将一个文本文件的格式从UNIX转换成MSDOS

       recode ..HTML < page.txt > page.html 将一个文本文件转换成html

       recode -l | more 显示所有允许的转换格式

       è¿”回顶部索引 ^

       æ–‡ä»¶ç³»ç»Ÿåˆ†æž

       badblocks -v /dev/hda1 检查磁盘hda1上的坏磁块

       fsck /dev/hda1 修复/检查hda1磁盘上linux文件系统的完整性

       fsck.ext2 /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck -j /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.ext3 /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.vfat /dev/hda1 修复/检查hda1磁盘上fat文件系统的完整性

       fsck.msdos /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

       dosfsck /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

       è¿”回顶部索引 ^

       åˆå§‹åŒ–一个文件系统

       mkfs /dev/hda1 在hda1分区创建一个文件系统

       mke2fs /dev/hda1 在hda1分区创建一个linux ext2的文件系统

       mke2fs -j /dev/hda1 在hda1分区创建一个linux ext3(日志型)的文件系统

       mkfs -t vfat -F /dev/hda1 创建一个 FAT 文件系统

       fdformat -n /dev/fd0 格式化一个软盘

       mkswap /dev/hda3 创建一个swap文件系统

       è¿”回顶部索引 ^

       SWAP文件系统

       mkswap /dev/hda3 创建一个swap文件系统

       swapon /dev/hda3 启用一个新的swap文件系统

       swapon /dev/hda2 /dev/hdb3 启用两个swap分区

       è¿”回顶部索引 ^

       å¤‡ä»½

       dump -0aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的完整备份

       dump -1aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的交互式备份

       restore -if /tmp/home0.bak 还原一个交互式备份

       rsync -rogpav --delete /home /tmp 同步两边的目录

       rsync -rogpav -e ssh --delete /home ip_address:/tmp 通过SSH通道rsync

       rsync -az -e ssh --delete ip_addr:/home/public /home/local 通过ssh和压缩将一个远程目录同步到本地目录

       rsync -az -e ssh --delete /home/local ip_addr:/home/public 通过ssh和压缩将本地目录同步到远程目录

       dd bs=1M if=/dev/hda | gzip | ssh user@ip_addr 'dd of=hda.gz' 通过ssh在远程主机上执行一次备份本地磁盘的操作

       dd if=/dev/sda of=/tmp/file1 备份磁盘内容到一个文件

       tar -Puf backup.tar /home/user 执行一次对 '/home/user' 目录的交互式备份操作

       ( cd /tmp/local/ && tar c . ) | ssh -C user@ip_addr 'cd /home/share/ && tar x -p' 通过ssh在远程目录中复制一个目录内容

       ( tar c /home ) | ssh -C user@ip_addr 'cd /home/backup-home && tar x -p' 通过ssh在远程目录中复制一个本地目录

       tar cf - . | (cd /tmp/backup ; tar xf - ) 本地将一个目录复制到另一个地方,保留原有权限及链接

       find /home/user1 -name '*.txt' | xargs cp -av --target-directory=/home/backup/ --parents 从一个目录查找并复制所有以 '.txt' 结尾的文件到另一个目录

       find /var/log -name '*.log' | tar cv --files-from=- | bzip2 > log.tar.bz2 查找所有以 '.log' 结尾的文件并做成一个bzip包

       dd if=/dev/hda of=/dev/fd0 bs= count=1 做一个将 MBR (Master Boot Record)内容复制到软盘的动作

       dd if=/dev/fd0 of=/dev/hda bs= count=1 从已经保存到软盘的备份中恢复MBR内容

       è¿”回顶部索引 ^

       å…‰ç›˜

       cdrecord -v gracetime=2 dev=/dev/cdrom -eject blank=fast -force 清空一个可复写的光盘内容

       mkisofs /dev/cdrom > cd.iso 在磁盘上创建一个光盘的iso镜像文件

       mkisofs /dev/cdrom | gzip > cd_iso.gz 在磁盘上创建一个压缩了的光盘iso镜像文件

       mkisofs -J -allow-leading-dots -R -V "Label CD" -iso-level 4 -o ./cd.iso data_cd 创建一个目录的iso镜像文件

       cdrecord -v dev=/dev/cdrom cd.iso 刻录一个ISO镜像文件

       gzip -dc cd_iso.gz | cdrecord dev=/dev/cdrom - 刻录一个压缩了的ISO镜像文件

       mount -o loop cd.iso /mnt/iso 挂载一个ISO镜像文件

       cd-paranoia -B 从一个CD光盘转录音轨到 wav 文件中

       cd-paranoia -- "-3" 从一个CD光盘转录音轨到 wav 文件中(参数-3)

       cdrecord --scanbus 扫描总线以识别scsi通道

       dd if=/dev/hdc | md5sum 校验一个设备的md5sum编码,例如一张 CD

       è¿”回顶部索引 ^

       ç½‘络 - (以太网和WIFI无线)

       ifconfig eth0 显示一个以太网卡的配置

       ifup eth0 启用一个 'eth0' 网络设备

       ifdown eth0 禁用一个 'eth0' 网络设备

       ifconfig eth0 ..1.1 netmask ...0 控制IP地址

       ifconfig eth0 promisc 设置 'eth0' 成混杂模式以嗅探数据包 (sniffing)

       dhclient eth0 以dhcp模式启用 'eth0'

       route -n show routing table

       route add -net 0/0 gw IP_Gateway configura default gateway

       route add -net ..0.0 netmask ..0.0 gw ..1.1 configure static route to reach network '..0.0/'

       route del 0/0 gw IP_gateway remove static route

       echo "1" > /proc/sys/net/ipv4/ip_forward activate ip routing

       hostname show hostname of system

       host www.example.com lookup hostname to resolve name to ip address and viceversa(1)

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa(2)

       ip link show show link status of all interfaces

       mii-tool eth0 show link status of 'eth0'

       ethtool eth0 show statistics of network card 'eth0'

       netstat -tup show all active network connections and their PID

       netstat -tupl show all network services listening on the system and their PID

       tcpdump tcp port show all HTTP traffic

       iwlist scan show wireless networks

       iwconfig eth1 show configuration of a wireless network card

       hostname show hostname

       host www.example.com lookup hostname to resolve name to ip address and viceversa

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa

       whois www.example.com lookup on Whois database

       GO TOP INDEX ^

       Microsoft Windows networks (SAMBA)

       nbtscan ip_addr netbios name resolution

       nmblookup -A ip_addr netbios name resolution

       smbclient -L ip_addr/hostname show remote shares of a windows host

       smbget -Rr smb://ip_addr/share like wget can download files from a host windows via smb

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share mount a windows network share

Linux常用命令大全

       系统信息

       arch 显示机器的处理器架构(1)

       uname -m 显示机器的处理器架构(2)

       uname -r 显示正在使用的内核版本

       dmidecode -q 显示硬件系统部件 - (SMBIOS / DMI)

       hdparm -i /dev/hda 罗列一个磁盘的架构特性

       hdparm -tT /dev/sda 在磁盘上执行测试性读取操作

       cat /proc/cpuinfo 显示CPU info的信息

       cat /proc/interrupts 显示中断

       cat /proc/meminfo 校验内存使用

       cat /proc/swaps 显示哪些swap被使用

       cat /proc/version 显示内核的版本

       cat /proc/net/dev 显示网络适配器及统计

       cat /proc/mounts 显示已加载的文件系统

       lspci -tv 罗列 PCI 设备

       lsusb -tv 显示 USB 设备

       date 显示系统日期

       cal 显示年的日历表

       date . 设置日期和时间 - 月日时分年.秒

       clock -w 将时间修改保存到 BIOS

       关机 (系统的关机、重启以及登出 )

       shutdown -h now 关闭系统(1)

       init 0 关闭系统(2)

       telinit 0 关闭系统(3)

       shutdown -h hours:minutes 按预定时间关闭系统

       shutdown -c 取消按预定时间关闭系统

       shutdown -r now 重启(1)

       reboot 重启(2)

       logout 注销

文件和目录

       cd /home 进入 '/ home' 目录'

       cd .. 返回上一级目录

       cd ../.. 返回上两级目录

       cd 进入个人的主目录

       cd ~user1 进入个人的主目录

       cd - 返回上次所在的目录

       pwd 显示工作路径

       ls 查看目录中的文件

       ls -F 查看目录中的文件

       ls -l 显示文件和目录的详细资料

       ls -a 显示隐藏文件

       ls *[0-9]* 显示包含数字的文件名和目录名

       tree 显示文件和目录由根目录开始的树形结构(1)

       lstree 显示文件和目录由根目录开始的树形结构(2)

       mkdir dir1 创建一个叫做 'dir1' 的目录'

       mkdir dir1 dir2 同时创建两个目录

       mkdir -p /tmp/dir1/dir2 创建一个目录树

       rm -f file1 删除一个叫做 'file1' 的文件'

       rmdir dir1 删除一个叫做 'dir1' 的目录'

       rm -rf dir1 删除一个叫做 'dir1' 的目录并同时删除其内容

       rm -rf dir1 dir2 同时删除两个目录及它们的内容

       mv dir1 new_dir 重命名/移动 一个目录

       cp file1 file2 复制一个文件

       cp dir/* . 复制一个目录下的所有文件到当前工作目录

       cp -a /tmp/dir1 . 复制一个目录到当前工作目录

       cp -a dir1 dir2 复制一个目录

       ln -s file1 lnk1 创建一个指向文件或目录的软链接

       ln file1 lnk1 创建一个指向文件或目录的物理链接

       touch -t file1 修改一个文件或目录的时间戳 - (YYMMDDhhmm)

       file file1 outputs the mime type of the file as text

       iconv -l 列出已知的编码

       iconv -f fromEncoding -t toEncoding inputFile outputFile creates a new from the given input file by assuming it is encoded in fromEncoding and converting it to toEncoding.

       find . -maxdepth 1 -name *.jpg -print -exec convert "{ }" -resize x "thumbs/{ }" ; batch resize files in the current directory and send them to a thumbnails directory (requires convert from Imagemagick)

文件搜索

       find / -name file1 从 '/' 开始进入根文件系统搜索文件和目录

       find / -user user1 搜索属于用户 'user1' 的文件和目录

       find /home/user1 -name *.bin 在目录 '/ home/user1' 中搜索带有'.bin' 结尾的文件

       find /usr/bin -type f -atime + 搜索在过去天内未被使用过的执行文件

       find /usr/bin -type f -mtime - 搜索在天内被创建或者修改过的文件

       find / -name *.rpm -exec chmod '{ }' ; 搜索以 '.rpm' 结尾的文件并定义其权限

       find / -xdev -name *.rpm 搜索以 '.rpm' 结尾的文件,忽略光驱、捷盘等可移动设备

       locate *.ps 寻找以 '.ps' 结尾的文件 - 先运行 'updatedb' 命令

       whereis halt 显示一个二进制文件、源码或man的位置

       which halt 显示一个二进制文件或可执行文件的完整路径

挂载一个文件系统

       mount /dev/hda2 /mnt/hda2 挂载一个叫做hda2的盘 - 确定目录 '/ mnt/hda2' 已经存在

       umount /dev/hda2 卸载一个叫做hda2的盘 - 先从挂载点 '/ mnt/hda2' 退出

       fuser -km /mnt/hda2 当设备繁忙时强制卸载

       umount -n /mnt/hda2 运行卸载操作而不写入 /etc/mtab 文件- 当文件为只读或当磁盘写满时非常有用

       mount /dev/fd0 /mnt/floppy 挂载一个软盘

       mount /dev/cdrom /mnt/cdrom 挂载一个cdrom或dvdrom

       mount /dev/hdc /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount /dev/hdb /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount -o loop file.iso /mnt/cdrom 挂载一个文件或ISO镜像文件

       mount -t vfat /dev/hda5 /mnt/hda5 挂载一个Windows FAT文件系统

       mount /dev/sda1 /mnt/usbdisk 挂载一个usb 捷盘或闪存设备

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share 挂载一个windows网络共享

磁盘空间

       df -h 显示已经挂载的分区列表

       ls -lSr |more 以尺寸大小排列文件和目录

       du -sh dir1 估算目录 'dir1' 已经使用的磁盘空间'

       du -sk * | sort -rn 以容量大小为依据依次显示文件和目录的大小

       rpm -q -a --qf '%{ SIZE}t%{ NAME}n' | sort -k1,1n 以大小为依据依次显示已安装的rpm包所使用的空间 (fedora, redhat类系统)

       dpkg-query -W -f='${ Installed-Size;}t${ Package}n' | sort -k1,1n 以大小为依据显示已安装的deb包所使用的空间 (ubuntu, debian类系统)

用户和群组

       groupadd group_name 创建一个新用户组

       groupdel group_name 删除一个用户组

       groupmod -n new_group_name old_group_name 重命名一个用户组

       useradd -c "Name Surname " -g admin -d /home/user1 -s /bin/bash user1 创建一个属于 "admin" 用户组的用户

       useradd user1 创建一个新用户

       userdel -r user1 删除一个用户 ( '-r' 排除主目录)

       usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 修改用户属性

       passwd 修改口令

       passwd user1 修改一个用户的口令 (只允许root执行)

       chage -E -- user1 设置用户口令的失效期限

       pwck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的用户

       grpck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的群组

       newgrp group_name 登陆进一个新的群组以改变新创建文件的预设群组

文件的权限 - 使用 "+" 设置权限,使用 "-" 用于取消

       ls -lh 显示权限

       ls /tmp | pr -T5 -W$COLUMNS 将终端划分成5栏显示

       chmod ugo+rwx directory1 设置目录的源码一站所有人(u)、群组(g)以及其他人(o)以读(r )、写(w)和执行(x)的权限

       chmod go-rwx directory1 删除群组(g)与其他人(o)对目录的读写执行权限

       chown user1 file1 改变一个文件的所有人属性

       chown -R user1 directory1 改变一个目录的所有人属性并同时改变改目录下所有文件的属性

       chgrp group1 file1 改变文件的群组

       chown user1:group1 file1 改变一个文件的所有人和群组属性

       find / -perm -u+s 罗列一个系统中所有使用了SUID控制的文件

       chmod u+s /bin/file1 设置一个二进制文件的 SUID 位 - 运行该文件的用户也被赋予和所有者同样的权限

       chmod u-s /bin/file1 禁用一个二进制文件的 SUID位

       chmod g+s /home/public 设置一个目录的SGID 位 - 类似SUID ,不过这是针对目录的

       chmod g-s /home/public 禁用一个目录的 SGID 位

       chmod o+t /home/public 设置一个文件的 STIKY 位 - 只允许合法所有人删除文件

       chmod o-t /home/public 禁用一个目录的 STIKY 位

文件的特殊属性 - 使用 "+" 设置权限,使用 "-" 用于取消

       chattr +a file1 只允许以追加方式读写文件

       chattr +c file1 允许这个文件能被内核自动压缩/解压

       chattr +d file1 在进行文件系统备份时,dump程序将忽略这个文件

       chattr +i file1 设置成不可变的文件,不能被删除、修改、重命名或者链接

       chattr +s file1 允许一个文件被安全地删除

       chattr +S file1 一旦应用程序对这个文件执行了写操作,使系统立刻把修改的结果写到磁盘

       chattr +u file1 若文件被删除,系统会允许你在以后恢复这个被删除的文件

       lsattr 显示特殊的属性

打包和压缩文件

       bunzip2 file1.bz2 解压一个叫做 'file1.bz2'的文件

       bzip2 file1 压缩一个叫做 'file1' 的文件

       gunzip file1.gz 解压一个叫做 'file1.gz'的文件

       gzip file1 压缩一个叫做 'file1'的文件

       gzip -9 file1 最大程度压缩

       rar a file1.rar test_file 创建一个叫做 'file1.rar' 的包

       rar a file1.rar file1 file2 dir1 同时压缩 'file1', 'file2' 以及目录 'dir1'

       rar x file1.rar 解压rar包

       unrar x file1.rar 解压rar包

       tar -cvf archive.tar file1 创建一个非压缩的 tarball

       tar -cvf archive.tar file1 file2 dir1 创建一个包含了 'file1', 'file2' 以及 'dir1'的档案文件

       tar -tf archive.tar 显示一个包中的内容

       tar -xvf archive.tar 释放一个包

       tar -xvf archive.tar -C /tmp 将压缩包释放到 /tmp目录下

       tar -cvfj archive.tar.bz2 dir1 创建一个bzip2格式的压缩包

       tar -xvfj archive.tar.bz2 解压一个bzip2格式的压缩包

       tar -cvfz archive.tar.gz dir1 创建一个gzip格式的压缩包

       tar -xvfz archive.tar.gz 解压一个gzip格式的压缩包

       zip file1.zip file1 创建一个zip格式的压缩包

       zip -r file1.zip file1 file2 dir1 将几个文件和目录同时压缩成一个zip格式的压缩包

       unzip file1.zip 解压一个zip格式压缩包

RPM 包 - (Fedora, Redhat及类似系统)

       rpm -ivh package.rpm 安装一个rpm包

       rpm -ivh --nodeeps package.rpm 安装一个rpm包而忽略依赖关系警告

       rpm -U package.rpm 更新一个rpm包但不改变其配置文件

       rpm -F package.rpm 更新一个确定已经安装的rpm包

       rpm -e package_name.rpm 删除一个rpm包

       rpm -qa 显示系统中所有已经安装的rpm包

       rpm -qa | grep mand file1_in.txt_or_file1_out.txt general syntax for text manipulation using PIPE, STDIN and STDOUT

       cat file1 | command( sed, grep, awk, grep, etc...) result.txt 合并一个文件的详细说明文本,并将简介写入一个新文件中

       cat file1 | command( sed, grep, awk, grep, etc...) result.txt 合并一个文件的详细说明文本,并将简介写入一个已有的文件中

       grep Aug /var/log/messages 在文件 '/var/log/messages'中查找关键词"Aug"

       grep ^Aug /var/log/messages 在文件 '/var/log/messages'中查找以"Aug"开始的词汇

       grep [0-9] /var/log/messages 选择 '/var/log/messages' 文件中所有包含数字的行

       grep Aug -R /var/log/* 在目录 '/var/log' 及随后的目录中搜索字符串"Aug"

       sed 's/stringa1/stringa2/g' example.txt 将example.txt文件中的 "string1" 替换成 "string2"

       sed '/^$/d' example.txt 从example.txt文件中删除所有空白行

       sed '/ *#/d; /^$/d' example.txt 从example.txt文件中删除所有注释和空白行

       echo 'esempio' | tr '[:lower:]' '[:upper:]' 合并上下单元格内容

       sed -e '1d' result.txt 从文件example.txt 中排除第一行

       sed -n '/stringa1/p' 查看只包含词汇 "string1"的行

       sed -e 's/ *$//' example.txt 删除每一行最后的空白字符

       sed -e 's/stringa1//g' example.txt 从文档中只删除词汇 "string1" 并保留剩余全部

       sed -n '1,5p;5q' example.txt 查看从第一行到第5行内容

       sed -n '5p;5q' example.txt 查看第5行

       sed -e 's/*/0/g' example.txt 用单个零替换多个零

       cat -n file1 标示文件的行数

       cat example.txt | awk 'NR%2==1' 删除example.txt文件中的所有偶数行

       echo a b c | awk '{ print $1}' 查看一行第一栏

       echo a b c | awk '{ print $1,$3}' 查看一行的第一和第三栏

       paste file1 file2 合并两个文件或两栏的内容

       paste -d '+' file1 file2 合并两个文件或两栏的内容,中间用"+"区分

       sort file1 file2 排序两个文件的内容

       sort file1 file2 | uniq 取出两个文件的并集(重复的行只保留一份)

       sort file1 file2 | uniq -u 删除交集,留下其他的BINN平台源码

       sort file1 file2 | uniq -d 取出两个文件的交集(只留下同时存在于两个文件中的文件)

       comm -1 file1 file2 比较两个文件的内容只删除 'file1' 所包含的内容

       comm -2 file1 file2 比较两个文件的内容只删除 'file2' 所包含的内容

       comm -3 file1 file2 比较两个文件的内容只删除两个文件共有的部分

字符设置和文件格式转换

       dos2unix filedos.txt fileunix.txt 将一个文本文件的格式从MSDOS转换成UNIX

       unix2dos fileunix.txt filedos.txt 将一个文本文件的格式从UNIX转换成MSDOS

       recode ..HTML page.txt page.html 将一个文本文件转换成html

       recode -l | more 显示所有允许的转换格式

文件系统分析

       badblocks -v /dev/hda1 检查磁盘hda1上的坏磁块

       fsck /dev/hda1 修复/检查hda1磁盘上linux文件系统的完整性

       fsck.ext2 /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck -j /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.ext3 /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.vfat /dev/hda1 修复/检查hda1磁盘上fat文件系统的完整性

       fsck.msdos /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

       dosfsck /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

初始化一个文件系统

       mkfs /dev/hda1 在hda1分区创建一个文件系统

       mke2fs /dev/hda1 在hda1分区创建一个linux ext2的文件系统

       mke2fs -j /dev/hda1 在hda1分区创建一个linux ext3(日志型)的文件系统

       mkfs -t vfat -F /dev/hda1 创建一个 FAT 文件系统

       fdformat -n /dev/fd0 格式化一个软盘

       mkswap /dev/hda3 创建一个swap文件系统

SWAP文件系统

       mkswap /dev/hda3 创建一个swap文件系统

       swapon /dev/hda3 启用一个新的swap文件系统

       swapon /dev/hda2 /dev/hdb3 启用两个swap分区

备份

       dump -0aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的完整备份

       dump -1aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的交互式备份

       restore -if /tmp/home0.bak 还原一个交互式备份

       rsync -rogpav --delete /home /tmp 同步两边的目录

       rsync -rogpav -e ssh --delete /home ip_address:/tmp 通过SSH通道rsync

       rsync -az -e ssh --delete ip_addr:/home/public /home/local 通过ssh和压缩将一个远程目录同步到本地目录

       rsync -az -e ssh --delete /home/local ip_addr:/home/public 通过ssh和压缩将本地目录同步到远程目录

       dd bs=1M if=/dev/hda | gzip | ssh user@ip_addr 'dd of=hda.gz' 通过ssh在远程主机上执行一次备份本地磁盘的操作

       dd if=/dev/sda of=/tmp/file1 备份磁盘内容到一个文件

       tar -Puf backup.tar /home/user 执行一次对 '/home/user' 目录的交互式备份操作

       ( cd /tmp/local/ tar c . ) | ssh -C user@ip_addr 'cd /home/share/ tar x -p' 通过ssh在远程目录中复制一个目录内容

       ( tar c /home ) | ssh -C user@ip_addr 'cd /home/backup-home tar x -p' 通过ssh在远程目录中复制一个本地目录

       tar cf - . | (cd /tmp/backup ; tar xf - ) 本地将一个目录复制到另一个地方,保留原有权限及链接

       find /home/user1 -name '*.txt' | xargs cp -av --target-directory=/home/backup/ --parents 从一个目录查找并复制所有以 '.txt' 结尾的文件到另一个目录

       find /var/log -name '*.log' | tar cv --files-from=- | bzip2 log.tar.bz2 查找所有以 '.log' 结尾的文件并做成一个bzip包

       dd if=/dev/hda of=/dev/fd0 bs= count=1 做一个将 MBR (Master Boot Record)内容复制到软盘的动作

       dd if=/dev/fd0 of=/dev/hda bs= count=1 从已经保存到软盘的备份中恢复MBR内容

光盘

       cdrecord -v gracetime=2 dev=/dev/cdrom -eject blank=fast -force 清空一个可复写的光盘内容

       mkisofs /dev/cdrom cd.iso 在磁盘上创建一个光盘的iso镜像文件

       mkisofs /dev/cdrom | gzip cd_iso.gz 在磁盘上创建一个压缩了的光盘iso镜像文件

       mkisofs -J -allow-leading-dots -R -V "Label CD" -iso-level 4 -o ./cd.iso data_cd 创建一个目录的iso镜像文件

       cdrecord -v dev=/dev/cdrom cd.iso 刻录一个ISO镜像文件

       gzip -dc cd_iso.gz | cdrecord dev=/dev/cdrom - 刻录一个压缩了的ISO镜像文件

       mount -o loop cd.iso /mnt/iso 挂载一个ISO镜像文件

       cd-paranoia -B 从一个CD光盘转录音轨到 wav 文件中

       cd-paranoia -- "-3" 从一个CD光盘转录音轨到 wav 文件中(参数-3)

       cdrecord --scanbus 扫描总线以识别scsi通道

       dd if=/dev/hdc | md5sum 校验一个设备的md5sum编码,例如一张 CD

网络 - (以太网和WIFI无线)

       ifconfig eth0 显示一个以太网卡的配置

       ifup eth0 启用一个 'eth0' 网络设备

       ifdown eth0 禁用一个 'eth0' 网络设备

       ifconfig eth0 ..1.1 netmask ...0 控制IP地址

       ifconfig eth0 promisc 设置 'eth0' 成混杂模式以嗅探数据包 (sniffing)

       dhclient eth0 以dhcp模式启用 'eth0'

       route -n show routing table

       route add -net 0/0 gw IP_Gateway configura default gateway

       route add -net ..0.0 netmask ..0.0 gw ..1.1 configure static route to reach network '..0.0/'

       route del 0/0 gw IP_gateway remove static route

       echo "1" /proc/sys/net/ipv4/ip_forward activate ip routing

       hostname show hostname of system

       host www.example.com lookup hostname to resolve name to ip address and viceversa(1)

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa(2)

       ip link show show link status of all interfaces

       mii-tool eth0 show link status of 'eth0'

       ethtool eth0 show statistics of network card 'eth0'

       netstat -tup show all active network connections and their PID

       netstat -tupl show all network services listening on the system and their PID

       tcpdump tcp port show all HTTP traffic

       iwlist scan show wireless networks

       iwconfig eth1 show configuration of a wireless network card

       hostname show hostname

       host www.example.com lookup hostname to resolve name to ip address and viceversa

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa

       whois www.example.com lookup on Whois database

       GO TOP INDEX ^

       Microsoft Windows networks (SAMBA)

       nbtscan ip_addr netbios name resolution

       nmblookup -A ip_addr netbios name resolution

       smbclient -L ip_addr/hostname show remote shares of a windows host

       smbget -Rr smb://ip_addr/share like wget can download files from a host windows via smb

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share mount a windows network share

Linux 应用案例开发手册——基于Xilinx Zynq-/工业开发板

       开发案例说明

       开发案例位于产品资料“4-软件资料\Demo\tl-linux-application\”路径下的 base-demos 和 python-demos 目录。base-demos目录提供Linux常用开发案例,案例bin目录存放可执行文件,案例src目录存放源码。python-demos目录提供Python开发案例,脚本文件无需编译,可直接运行。测试板卡是基于Xilinx Zynq-系列XC7Z/XC7Z高性能低功耗处理器设计的异构多核SoC工业级核心板。

       若需重新编译Linux常用开发案例,请将对应案例src目录复制到Ubuntu工作目录下,进入src目录执行命令加载PetaLinux环境变量,并执行make命令进行案例编译。编译完成后,将在当前目录下生成可执行文件。

       Linux常用开发案例包括tl_led_flash、tl_key_test和tl_can_echo等。

       tl_led_flash案例功能是通过向评估底板用户指示灯LED设备节点反复交替写入1、0数值,鞋子推广源码实现LED闪烁效果。LED点亮与熄灭时间均为0.5s。程序流程示意图显示LED设备节点为“/sys/class/leds/user-ledX/”目录下的brightness。

       操作说明包括将案例bin目录下的可执行程序tl_led_flash复制到评估板文件系统,并在可执行程序所在目录执行命令运行程序,即可看到评估底板LED1以0.5s的时间间隔进行闪烁。同时,串口终端打印系统全部LED设备信息和程序当前控制的LED设备信息。

       关键代码包括预定义LED数组、LED亮灭操作和时间间隔。

       tl_key_test案例功能是通过监听用户按键设备节点状态,检测按键事件。程序流程示意图显示用户按键设备节点为“/dev/input/event0”。操作说明包括将案例bin目录下的可执行程序tl_key_test复制到评估板文件系统,在可执行程序所在目录执行命令运行程序,串口终端将打印提示信息。再按下评估板用户按键KEY1,程序将检测到按键事件,并打印按键状态信息。土城争霸 源码

       关键代码包括定义按键、监听按键事件和循环监听。

       tl_can_echo案例功能使用canutils工具包的canecho程序实现CAN接口数据接收并重发功能。canutils工具包内含5个独立程序,包括canconfig、candump、canecho、cansend、cansequence等。本案例仅使用canecho功能,如需实现其他功能,可自行下载canutils工具包并从中获取对应功能程序源码。操作说明包括使用USB转CAN模块连接评估板CAN接口和PC机USB接口,参照调试工具安装文档安装USB转CAN驱动和ECAN Tools调试软件,双击打开ECAN Tools软件,选择设备类型,然后点击“打开设备”。打开ECAN Tools界面,将案例bin目录下的测算2021源码PL端.bin格式可执行文件复制到评估板文件系统"/lib/firmware/"目录下,并执行命令加载PL端可执行文件。进入评估板文件系统使用文件系统自带的canconfig工具设置波特率,并启动CAN接口。将案例bin目录下的可执行程序tl_can_echo复制到评估板文件系统,执行命令查看程序参数信息,绑定CAN接口并接收由ECAN Tools发出的数据,然后将接收到的数据重新发送出去。

       关键代码包括使用socket监听CAN接口和将从CAN接口接收到的数据重新发送出去。

       tcp_udp_demos案例主要实现客户端(client)与服务端(server)的文本数据相互收发功能。案例包含4个程序,包括tl_tcp_server、tl_tcp_client、tl_udp_server和tl_udp_client。操作说明包括将案例bin目录下的4个可执行程序复制到评估板文件系统,在Ubuntu中执行命令使用OpenSSH登陆评估板文件系统,并在可执行程序所在目录执行命令运行TCP和UDP服务端和客户端程序。程序执行后,客户端将会连接服务端或服务端和客户端程序均在评估板上运行时,可进行本地回环测试。关键代码以TCP通信程序为例,包括注意源码中的数据结构和系统调用的使用。

       Python开发案例包括tl_led_flash和tl_key_test两个简单案例。操作说明包括将案例目录下的脚本文件拷贝到评估板文件系统,并在脚本文件所在目录执行命令查看程序参数信息,执行命令运行脚本程序,即可看到评估底板上的LED闪烁或检测按键事件。关键代码包括查找所有LED设备和控制LED亮灭,以及打开按键设备和监听按键事件。

       以上内容为Linux应用案例开发手册——基于Xilinx Zynq-/工业开发板中的详细开发案例和操作说明。更多关于嵌入式开发的内容分享,欢迎关注Tronlong创龙科技~

插件崩溃怎么回事怎么解决

       起因:

       测试公司的保障MySQL高可用组件时发现一个异常。

       停止从库,高可用组件将从库自动启动后,主库发生重启。而正常情况下主库不应发生重启。

       环境:

       OS: CentOS release 6.7 (Final)MySQL:Ver . Distrib 5.7., for linux-glibc2.5 (x_) using EditLine wrapper主从实例开启半同步 MySQL semi-sync配置文档

       分析:

       首先,先分析log文件

       在主库的mysql-error.log中我们可以发现如下几点:

       1. 主库的semi-sync在崩溃前做了启停动作。

       --T::.+:

       Semi-sync replication switched OFF.--T::.+:

       Semi-sync replication disabled on the master.--T::.+: 0

       Stopping ack receiver thread--T::.+:

       Semi-sync replication enabled on the master.--T::.+: 0

       Starting ack receiver thread

       2. 主库的semi-sync启动后立即引发了semi-sync插件崩溃,并抛出Assert异常。

       mysqld: /export/home/pb2/build/sb_0--./mysql-5.7./plugin/semisync/semisync_master.cc:: int ReplSemiSyncMaster::commitTrx(const char*, my_off_t): Assertion `entry' failed.:: UTC - mysqld got signal 6 ;

       3. 这里还有一个相当重要的复现故障的线索。简单说明一下,这条SQL语句是为了检测主从数据差,而由高可用中间件不断的向数据库更新时间戳。

       Trying to get some variables.Some pointers may be invalid and cause the dump to abort.Query (7fcc0): update universe.u_delay set real_timestamp=now(), logic_timestamp = logic_timestamp + 1 where source = 'ustats'Connection ID (thread ID): Status: NOT_KILLED

       到这里初步判断是这个故障应与设置

       rpl_semi_sync_master_enabled开关相关,并且应该当时是有事务提交的。

       进一步验证,这里只部署一组开启semi-sync的MySQL实例,而不安装高可用组件。利用bash脚本向主库不断插入数据:

       /opt/mysql/base/bin/mysql -uroot -p1 -S /opt/mysql/data//mysqld.sock -e "create database if not exists test;use test;drop table if exists t1;create table t1(id int) "

       i=0

       while true

       do

       /opt/mysql/base/bin/mysql -uroot -p1 -S /opt/mysql/data//mysqld.sock -e "insert into test.t1 values($i)"

       i=$((i+1))

       done

       在主库的机器上,反复运行如下命令,启停semi-sync master,不超过5次必能复现这个故障。

       /opt/mysql/base/bin/mysql -uroot -p1 -S /opt/mysql/data//mysqld.sock -e'SET GLOBAL rpl_semi_sync_master_enabled = OFF;SET GLOBAL rpl_semi_sync_master_enabled = ON'

       所以这个故障复现有了两个必要条件:

       启停semi-sync master

       数据库当时有事务提交

       其次,分析MySQL源码

       至于为什么不能每次启停semi-sync master都能触发这个故障,那我们就要看看MySQL的源码了

       还好mysql-error.log明确的指出了抛出异常的位置:

       mysqld: /export/home/pb2/build/sb_0--./mysql-5.7./plugin/semisync/semisync_master.cc:: int ReplSemiSyncMaster::commitTrx(const char*, my_off_t): Assertion `entry' failed.:: UTC - mysqld got signal 6 ;This could be because you hit a bug. It is also possible that this binaryor one of the libraries it was linked against is corrupt, improperly built,or misconfigured. This error can also be caused by malfunctioning hardware.Attempting to collect some information that could help diagnose the problem.As this is a crash and something is definitely wrong, the informationcollection process might fail.

       找到MySQL源码,抛出异常的的位置 mysql-5.7. semisync_master.cc#L

       看来是这个‘entry’的值为NULL,才抛出的异常,但是这还没有回答我的疑问。

       再看MySQL的报错信息,MySQL自己也认识到这应该是个BUG,那它有没有修复这个故障呢?

       我找到MySQL最新5.7.的版本,查看它的历史记录mysql-5.7. semisync_master.cc history

       这正是我想要的修复和提交,打开看看有没有对产生故障原因的分析。Bug#: ENABLING SEMI-SYNC DURING COMMIT CAN CAUSE MASTER TO ASSERT.

       为了方便解释这个BUG, 这里先简单的介绍一下MySQL binlog提交过程:

       MySQL 在5.6版本引入了Binary Log Group Commit,二进制日志的提交由此可以简化为三个阶段:

       Flush stage:将事务的日志写入binlog文件的缓存中

       Sync stage: 将binlog文件中的缓存数据写入磁盘

       Commit stage:根据顺序调用存储引擎提交事务。

       MYSQL_BIN_LOG::ordered_commit,这个是事务在binlog阶段提交的核心函数。通过该函数,实现了事务日志写入binlog文件,以及触发dump线程将binlog发送到从库,在最后将事务设置为提交状态。

       事实上,有没有semi-sync机制,上面介绍的MySQL的有关事务提交中关于binlog的流程都是一样的。semi-sync的作用只是主从之间的一个确认过程,主库等待从库返回相关位置的binlog已经同步到从库的确认,没有得到确认之前,事务提交则在该函数(步骤)上等待直至获得返回。

       在半同步复制中,为了在主库提交事务时等待从库的确认,才引出了由‘entry’组成的active transaction链表。

       在BUG分析中提到:

       首先在flush stage,由semi-sync创建一个‘entry’,并关联一个或一组处于flush stage的事务。这个‘entry’被插入一个active transaction链表。 参考: create entry

       搜图

       编辑

       接下来是sync stage,在sync stage每个处于这个阶段的线程将会设置trx_wait_binlog_name和trx_wait_binlog_pos为事务对应binlog的相对位置最后再commit stage,semi-sync为了等从库的确认,会用trx_wait_binlog_name和trx_wait_binlog_pos获取这个位置关联的'entry', 参考: find entry

       这里有两个场景会出现‘entry’找不到的状况:

       1. 从库已经确认的事务在binlog位置比当前等待从库确认的事务在binlog的位置要大

       2. 当事务进入flush stage的时候semi-sync还没有开启,也就没有‘entry’被创建,然后插入active transaction链表

       这里情况1永远也不会进入等待阶段,因为它已经被从库确认过了。情况2则会导致上述的断言异常,因为这里他无法在active transaction链表找到相应的’entry‘

       到这里我的疑问终于解开,原来开启semi-sync master的时机很重要,要恰巧撞到事务提交过了flush stage但还没有到commit stage这个缝隙

       结论:

       最终修复的结果也很明显,就是遇到找不到‘entry’,并且从库也没有确认的情况,这个事务提交就被认为是一次异步提交。

       再看一眼在哪些版本修复了这个BUG:

       所以升级MySQL版本可以解决问题。

       复盘:

       最后总结一下我的诊断路径:

       观察故障出现的现象,分析MySQL的error log通过猜想和实验,构成简单的复现场景通过日志和MySQL源码的对应关系, 搜索代码历史, 定位BUG号通过阅读BUG的分析,了解异常发生的原理并知道了详细的复现条件

相关栏目:热点