Linux on Jermineの博客

Sub System Linux for Win10 - Win10设置Linux子系统

Thu, 07 Sep 2017 10:29:47 +0800

按如下步骤进行安装：

设置win10开启Linux

系统升级到一周年正式版及以上(1607)

依次在设置 - 更新与安全 - 针对开发人员选项中，启用"开发人员模式"

SSH Config for Alive - 解决ssh经常断开的问题

Thu, 12 May 2016 09:54:32 +0800

SSH连接总是隔一段时间没有输入时就断开，解决办法如下：

服务端配置

sudo vi /etc/ssh/sshd_config
ClientAliveInterval 60     #服务端主动向客户端请求响应的间隔
ClientAliveCountMax 10    #服务器发出请求后客户端没有响应的次数达到一定值就自动断开
sudo restart ssh

客户端配置

sudo vi /etc/ssh/ssh_config #或~/.ssh/config

基于Docker部署ceph分布式文件系统[MImic13.2

Thu, 24 Jan 2019 15:32:11 +0800

本文记录了基于docker部署最新ceph版本的多节点高可用测试详尽过程，切身体会比ceph-deploy方便得多，希望能给初次接触ceph的同学提供些许参考。

Linux安装Nvidia Docker

Wed, 26 Dec 2018 18:14:00 +0800

注意： 由于程序运行于容器之中，所以镜像中一般都是带有CUDA、CUDNN库的，因此只需要在docker所在的主机上安装显卡驱动即可，无需费太大力气去安装cuda、cuddn之类的东西。

LDAP集成多个系统配置截图

Fri, 07 Dec 2018 09:47:45 +0800

多个系统基于LDAP用户认证

OpenLDAP是一个集中的用户账号管理系统。使用轻量级目录访问协议（LDAP）构建集中的身份验证系统可以减少管理成本，增强安全性，避免数据复制的问题，并提高数据的一致性。

关于Docker远程连接

Thu, 29 Nov 2018 11:24:37 +0800

非安全的连接方式

先介绍 非安全 的连接方式。

服务端配置

CoreOS 请使用第二种方法，其他 Linux 系统配置时选择以下两种方法之一

通常的配置方法

docker.service 中 dockerd 的 -H 参数不能与 daemon.json 中的 hosts 键值对冲突。(其他参数同理)

新建 /etc/systemd/system/docker.service.d/docker.conf 文件。

Nvidia Docker可以指定GPU以及数量

Fri, 23 Nov 2018 18:17:44 +0800

docker可以指定GPU以及数量操作如下：

docker调用GPU时可以明确指定用哪一张显卡，同时也可以指定数量

Ubuntu18.04修改DNS

Thu, 22 Nov 2018 14:56:29 +0800

Ubuntu18.04修改DNS

问题描述

最近使用了最新版的ubuntu 18.04运行一些服务，然后发现服务器经常出现网络不通的情况，主要是一些域名无法解析。

检查/etc/resolv.conf，发现之前修改的nameserver总是会被修改为127.0.0.53，无论是改成啥，过段时间，总会变回来。

OpenStack下利用passthrough对GPU实现虚拟化

Sat, 27 Oct 2018 17:51:33 +0800

Tips：默认已安装好OpenStack相关必要组件并可以正常运行的情况下，本文只涉及GPU 虚拟化的相关配置说明。

配置GPU Passthrough的系统相关设置

在BIOS中enable VT-x, VT-d, Onboard VGA. Onboard VGA 的enable可以避免一些错误的出现，具体参考Not only for miners GPU integration in Nova environment. https://www.youtube.com/watch?v=1tdvz3ejokM

如何在虚拟机上配置PCI直通

Sat, 27 Oct 2018 17:26:14 +0800

问题描述

我想要分配一块物理网卡到用KVM创建的虚拟机上。我打算为这台虚拟机启用网卡的PCI直通。请问，我如何才能在virt-manager里面通过PCI直通方式来增加一个PCI设备到虚拟机上？_

Surf the Net on Linux Host by Notebook－把笔记本的无线网络通过网线共享给台式机

Sat, 27 Oct 2018 16:45:22 +0800

如何把笔记本的无线网络通过网线共享给台式机

问题描述

之前有去XX所,由于内网限制，不能上外网，然而安装软件又需要从网上下载，Linux的软件大多又有很多依赖库,离线安装太麻烦了，于是就想能否让电脑在安装软件的时候连上外网呢？答案是肯定的。操作详情如下：

如何为Debian系统打deb包

Thu, 27 Sep 2018 18:23:38 +0800

源码编译安装

以dropwatch为例子，将其打成deb包。源码地址：https://github.com/pavel-odintsov/drop_watch

Linux服务器丢包故障的解决

Thu, 27 Sep 2018 17:27:23 +0800

我们使用Linux作为服务器操作系统时，为了达到高并发处理能力，充分利用机器性能，经常会进行一些内核参数的调整优化，但不合理的调整常常也会引起意想不到的其他问题，本文就一次Linux服务器丢包故障的处理过程，结合Linux内核参数说明和TCP/IP协议栈相关的理论，介绍一些常见的丢包故障定位方法和解决思路。

KVM基本使用介绍

Wed, 26 Sep 2018 11:27:37 +0800

KVM是什么？

KVM 全称是基于内核的虚拟机(Kernel-based Virtual Machine)，它是一个 Linux 的一个内核模块，该内核模块使得 Linux 变成了一个 Hypervisor：

它由 Quramnet 开发，该公司于 2008年被 Red Hat 收购。
它支持 x86 (32 and 64 位), s390, Powerpc 等 CPU。
它从 Linux 2.6.20 起就作为一模块被包含在 Linux 内核中。
它需要支持虚拟化扩展的 CPU。
它是完全开源的。

KVM架构

　　KVM 是基于虚拟化扩展(Intel VT 或者 AMD-V)的 X86 硬件的开源的 Linux 原生的全虚拟化解决方案。KVM 中，虚拟机被实现为常规的 Linux 进程，由标准 Linux 调度程序进行调度;虚机的每个虚拟 CPU 被实现为一个常规的 Linux 进程。这使得 KMV 能够使用 Linux 内核的已有功能。

管理kvm常用命令总结

Wed, 26 Sep 2018 10:18:25 +0800

查看虚拟机列表及状态

[root@kvm01 ~]# virsh list --all 
Id    Name                           State
---------------------------------------------------- 
-     vm1                            shut off

启动虚拟机系统

[root@kvm01 ~]# virsh start vm1
Domain vm1 started

停止虚拟机系统

[root@kvm01 ~]# virsh shutdown vm1

停止虚拟机要求虚拟机开启acpid服务

重启虚拟机系统

[root@kvm01 ~]# virsh reboot vm1

强制关机虚拟机系统

[root@kvm01 ~]# virsh destroy vm1

设置虚拟机随宿主机开机自启

[root@kvm01 ~]# virsh autostart vm1

取消虚拟机随宿主机开机自启

[root@kvm01 ~]# virsh autostart --disable vm1

挂起及恢复虚拟机

挂起：

[root@kvm01 ~]# virsh suspend vm1

恢复：

设置kvm中的虚拟机随宿主机自启动

Wed, 26 Sep 2018 10:10:50 +0800

图形化方式

在kvm图形化管理工具里面可以设置，让kvm虚拟机随着宿主虚拟机一起启动。（必须在关机状态下做）

设置好以后会像Windows一样创建一个快捷方式

设置服务器通电自启动

Thu, 20 Sep 2018 11:09:18 +0800

进入bios，一般是在开机后出现主板画面是按Delete这个键，部分品牌机可能按F2，F1

选择IntegratedPeripharals（外围设备设置）中的`SuperIO Device

Integrated [ˈɪntɪgreɪtɪd] 集成； Peripharals [pəˈrɪfərəl]` 外围

LDAP与Harbor集成

Wed, 19 Sep 2018 13:56:48 +0800

LDAP与Harbor集成

OpenLDAP是一个集中的用户账号管理系统；使用轻量级目录访问协议（LDAP）构建集中的身份验证系统可以减少管理成本，增强安全性，避免数据复制的问题，并提高数据的一致性。

修改harbor.cfg

Harbor默认是使用mysql数据库进行用户管理，那么我们需要修改Harbor的配置文件。

在harbor目录下，执行：

vi harbor.cfg

auth_mode = ldap_auth ：验证模式
ldap_url = ldap://192.168.16.196：openldap server
ldap_basedn = ou=dev,dc=xinktech,dc=com：同上
ldap_filter = (objectClass=person)：默认
ldap_group_basedn = ou=dev,dc=xinktech,dc=com
ldap_group_filter = objectclass=posixGroup

生成自签名证书

首先，把自己的IP地址(192.168.16.85)域名设置为: test.harbor.com:

启用或关闭图形化

Tue, 18 Sep 2018 13:47:58 +0800

Centos 或者 RHEL 开启关闭图形化设置

CentOS 7 关闭图形界面

查看/etc/inittab如下：

# systemd uses 'targets' instead of runlevels.   
# by default, there are two main targets:  
#  
# multi-user.target: analogous to runlevel 3  
# graphical.target: analogous to runlevel 5  
#  
# To view current default target, run:  
# systemctl get-default  
#  
# To set a default target, run:  
# systemctl set-default TARGET.target

新版本的CentOS 系统里使用’targets’ 取代了运行级别的概念。系统有两种默认的’targets’: multi-user.target.target 对应之前版本的3 运行级别；而graphical.target对应之前的5运行级别。

关于DevOps落地方案的个人观点

Thu, 13 Sep 2018 18:14:57 +0800

引言：

DevOps（Development和Operations的组合词）是一组过程、方法与系统的统称，用于促进开发（应用程序/软件工程）、技术运营和质量保障（QA）部门之间的沟通、协作与整合。

为什么Sed命令在自动化运维中如此重要

Tue, 11 Sep 2018 12:56:04 +0800

介绍

sed：Stream Editor文本流编辑，sed是一个“非交互式的”面向字符流的编辑器。能同时处理多个文件多行的内容，可以不对原文件改动，把整个文件输入到屏幕,可以把只匹配到模式的内容输入到屏幕上。还可以对原文件改动，但是不会再屏幕上返回结果。

Linux 常用命令收集

Tue, 11 Sep 2018 09:43:59 +0800

查找指定目录下符合条件的文件

ls -lh $(find /home -type f -size +100M) #查找指定目录下文件的大小

ls -lh $(find /home -type f -size +10M -a -size -100M）# 查找大于10M且小于100M的文件

find / -name "*.mp3" -type f -size +100M |xargs rm -rf #删除单个文件超过100M的MP3文件

获取指定目录信息

获取指定目录的绝对地址

Htop的安装和使用

Fri, 07 Sep 2018 13:19:47 +0800

一．Htop的使用简介

大家可能对top监控软件比较熟悉，今天我为大家介绍另外一个监控软件Htop，姑且称之为top的增强版，相比top其有着很多自身的优势。如下：

Redhat7解决This system is not registered to Red Hat Subscription Management.

Wed, 05 Sep 2018 14:38:41 +0800

错误描述：

This system is not registered to Red Hat Subscription Management. You can use subscription-manager to register.

解决步骤:

删除redhat原有的yum

rpm -aq|grep yum|xargs rpm -e --nodeps

下载yum安装文件

到这个网站去下载如下RPM包：http://mirrors.163.com/centos/7/os/x86_64/Packages/

Linux [re]install CUDA - Linux 安装和使用 CUDA

Fri, 24 Aug 2018 13:48:25 +0800

简便安装方法

此文档来源于Jermine的个人blog ： https://jermine.vdo.pub/linux/ubuntu-16.04-reinstall-cuda/

远程桌面协议对比

Thu, 31 Aug 2017 11:01:13 +0800

远程桌面协议对比

最近在学习虚拟化相关的知识，遇到远程桌面协议，就简单整理了下找到的资料，目前常用的协议有VNC/SPICE/RDP三种，就在这里做一个简单的介绍。

Docker中使用深度学习框架并支持GPU加速

Wed, 23 Aug 2017 15:40:16 +0800

Docker中使用深度学习框架并支持GPU加速

启动一个支持gpu的容器

docker run --runtime=nvidia --restart=always --name tensorflow  -dit -v `pwd`:/app -w /app  nvidia/cuda:9.0-cudnn7-runtime-ubuntu16.04

进入容器

docker exec -it tensorflow bash

设置源


Jermine@ubuntu:~$ cat > /etc/apt/sources.list

deb http://mirrors.aliyun.com/ubuntu/ xenial main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ xenial-security main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ xenial-updates main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ xenial-backports main restricted universe multiverse
##测试版源
deb http://mirrors.aliyun.com/ubuntu/ xenial-proposed main restricted universe multiverse

更新源

sudo apt-get update

安装相关依赖

# 导入环境变量
 TENSORFLOW_VERSION=1.7.0 
 
 apt-get update -y  && apt-get install -y --no-install-recommends python3 python3-pip  protobuf-compiler;\
    pip3 install --upgrade pip ;\
    python3 -V && pip3 -V ;\
    pip3  --no-cache-dir install setuptools  ;\
    pip3 --no-cache-dir install  \
    https://storage.googleapis.com/tensorflow/linux/gpu/tensorflow_gpu-${TENSORFLOW_VERSION}-cp35-cp35m-linux_x86_64.whl ;\
    apt-get autoremove && apt-get autoclean ;\
    rm -rf /var/lib/apt/lists/*

测试程序

import numpy as np
np.random.seed(0)
import tensorflow as tf
import time

N,D = 6000,8000

with tf.device('/cpu:0'):
    x = tf.placeholder(tf.float32)
    y = tf.placeholder(tf.float32)
    z = tf.placeholder(tf.float32)

    a = x * y
    b = a + z
    c = tf.reduce_sum(b)

grad_x, grad_y, grad_z = tf.gradients(c, [x,y,z])

start_time = time.time()
with tf.Session() as sess:
    values = {
        x: np.random.randn(N, D),
        y: np.random.randn(N, D),
        z: np.random.randn(N, D),
    }
    out = sess.run([c, grad_x, grad_y, grad_z],
                   feed_dict=values)
    c_val, grad_x_val, grad_y_val, grad_z_val = out
elapsed = time.time() - start_time
print(time.strftime("%H:%M:%S", time.gmtime(elapsed)))
print("exit 0")

将其存为 test_gpu_for_tensorflow.py ，使用 python3 test_gpu_for_tensorflow.py 执行结果如下：

Remmina一个Linux下功能丰富的远程桌面共享工具

Mon, 31 Jul 2017 12:26:34 +0800

Remmina 是一款在 Linux 和其他类 Unix 系统下的自由开源、功能丰富、强大的远程桌面客户端，它用 GTK+ 3 编写而成。它适用于那些需要远程访问及使用许多计算机的系统管理员和在外出行人员。

Certificate Signed by Unknown Authority Error

Sat, 13 May 2017 16:21:51 +0800

Certificate signed by unknown authority error

x509: certificate signed by unknown authority This error message means that you do not have a trusted certificate. You need to trust the default certificates generated during your Docker Trusted Registry (DTR) installation.

You can do so by running these commands on the nodes from where you want to access your DTR (be sure to replace with your DTR Domain name.):

CentOS/RHEL

export DOMAIN_NAME=hub.fi.vdo.pub
export TCP_PORT=443
openssl s_client -connect $DOMAIN_NAME:$TCP_PORT -showcerts </dev/null 2>/dev/null | openssl x509 -outform PEM | sudo tee /etc/pki/ca-trust/source/anchors/$DOMAIN_NAME.crt
update-ca-trust
systemctl restart docker.service

Ubuntu

Linux保存依赖安装包到指定目录(用于离线安装)

Tue, 21 Mar 2017 16:00:00 +0800

经常与一些保密级别较高的企业打交道，他们使用的网络都是内部网络，根本无法访问到公网，但是部署一些项目时难免会有依赖包需要离线安装。遇到这种问题通常都是手动去下载依赖的库，然后离线安装，但是你无法判断下载的这个依赖库是否还依赖其他库，如果是手动去下载安装将耗费很长时间（他们导入任何文件都要走流程，一次就需要4h左右），为了改善这种情况，就需要将所有依赖都离线下载到本，本文将介绍如何将Centos和Ubuntu的依赖包保存到本地。

终端利器tmux不止完美替换nohup-&-screen等进程守护命令

Tue, 31 Jan 2017 12:49:08 +0800

“君子生非异也，善假于物也” 。–语出《荀子·劝学》

如果记得没错的话，《荀子·劝学》我们这一代高中的时候应该都读过这篇文章。原意大概是君子的资质与一般人没有什么区别，君子之所以高于一般人，是因为他能善于利用外物。对于技术人来说，好工具的选择和使用往往可以省去很多不必要的麻烦，好的开源工具很多，看你如何去使用。对于终端复用工具这里推荐使用tmux，当然此类工具比较好的还有screen，不过相对screen 这里我更倾向于推荐tmux[强悍的分屏等]。

Centos7.4升级内核到4

Mon, 12 Dec 2016 18:08:28 +0800

查看内核版本：uname -r

[root@k8s-node02 ~]# uname -r
3.10.0-862.9.1.el7.x86_64
[root@k8s-node02 ~]#

内核版本为3.10.0

导入elrepo的key，然后安装elrepo的yum源


rpm -import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org

rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-2.el7.elrepo.noarch.rpm

使用以下命令列出可用的内核相关包

yum --disablerepo="*" --enablerepo="elrepo-kernel" list available

[root@localhost ~]# yum --disablerepo="*" --enablerepo="elrepo-kernel" list available
Loaded plugins: fastestmirror
Loading mirror speeds from cached hostfile
 * elrepo-kernel: hkg.mirror.rackspace.com
Available Packages
kernel-lt.x86_64                                                  4.4.166-1.el7.elrepo                                 elrepo-kernel
kernel-lt-devel.x86_64                                            4.4.166-1.el7.elrepo                                 elrepo-kernel
kernel-lt-doc.noarch                                              4.4.166-1.el7.elrepo                                 elrepo-kernel
kernel-lt-headers.x86_64                                          4.4.166-1.el7.elrepo                                 elrepo-kernel
kernel-lt-tools.x86_64                                            4.4.166-1.el7.elrepo                                 elrepo-kernel
kernel-lt-tools-libs.x86_64                                       4.4.166-1.el7.elrepo                                 elrepo-kernel
kernel-lt-tools-libs-devel.x86_64                                 4.4.166-1.el7.elrepo                                 elrepo-kernel
kernel-ml-doc.noarch                                              4.19.8-1.el7.elrepo                                  elrepo-kernel
kernel-ml-headers.x86_64                                          4.19.8-1.el7.elrepo                                  elrepo-kernel
kernel-ml-tools.x86_64                                            4.19.8-1.el7.elrepo                                  elrepo-kernel
kernel-ml-tools-libs.x86_64                                       4.19.8-1.el7.elrepo                                  elrepo-kernel
kernel-ml-tools-libs-devel.x86_64                                 4.19.8-1.el7.elrepo                                  elrepo-kernel
perf.x86_64                                                       4.19.8-1.el7.elrepo                                  elrepo-kernel
python-perf.x86_64                                                4.19.8-1.el7.elrepo                                  elrepo-kernel
[root@localhost ~]#

可以看出，长期维护版本lt为4.4，最新主线稳定版ml为4.19，我们需要安装最新的主线稳定内核，使用如下命令：

Linux on Jermineの博客

Sub System Linux for Win10 - Win10设置Linux子系统

设置win10开启Linux

SSH Config for Alive - 解决ssh经常断开的问题

服务端配置

客户端配置

基于Docker部署ceph分布式文件系统[MImic13.2

Linux安装Nvidia Docker

LDAP集成多个系统配置截图

多个系统基于LDAP用户认证

关于Docker远程连接

非安全的连接方式

服务端配置

通常的配置方法

Nvidia Docker可以指定GPU以及数量

docker可以指定GPU以及数量操作如下：

Ubuntu18.04修改DNS

Ubuntu18.04修改DNS

问题描述

OpenStack下利用passthrough对GPU实现虚拟化

配置GPU Passthrough的系统相关设置

如何在虚拟机上配置PCI直通

问题描述

Surf the Net on Linux Host by Notebook－把笔记本的无线网络通过网线共享给台式机

如何把笔记本的无线网络通过网线共享给台式机

问题描述

如何为Debian系统打deb包

源码编译安装

Linux服务器丢包故障的解决

KVM基本使用介绍

KVM是什么？

KVM架构

管理kvm常用命令总结

查看虚拟机列表及状态

启动虚拟机系统

停止虚拟机系统

重启虚拟机系统

强制关机虚拟机系统

设置虚拟机随宿主机开机自启

取消虚拟机随宿主机开机自启

挂起及恢复虚拟机

设置kvm中的虚拟机随宿主机自启动

图形化方式

设置服务器通电自启动

LDAP与Harbor集成

LDAP与Harbor集成

OpenLDAP是一个集中的用户账号管理系统；使用轻量级目录访问协议（LDAP）构建集中的身份验证系统可以减少管理成本，增强安全性，避免数据复制的问题，并提高数据的一致性。

修改harbor.cfg

生成自签名证书

启用或关闭图形化

Centos 或者 RHEL 开启关闭图形化设置

CentOS 7 关闭图形界面

关于DevOps落地方案的个人观点

引言：

为什么Sed命令在自动化运维中如此重要

介绍

Linux 常用命令收集

查找指定目录下符合条件的文件

获取指定目录信息

Htop的安装和使用

一．Htop的使用简介

Redhat7解决This system is not registered to Red Hat Subscription Management.

错误描述：

解决步骤:

删除redhat原有的yum

下载yum安装文件

Linux [re]install CUDA - Linux 安装和使用 CUDA

简便安装方法

推荐两种玩法：

远程桌面协议对比

远程桌面协议对比

Docker中使用深度学习框架并支持GPU加速

Docker中使用深度学习框架并支持GPU加速

启动一个支持gpu的容器

进入容器

设置源

更新源

安装相关依赖

测试程序

Remmina一个Linux下功能丰富的远程桌面共享工具