xDai's Site

adb连接安卓手机远程调试

2022-06-08T07:03:15.000Z

下载 adb 工具，对应平台如下：

1
2
3

https://dl.google.com/android/repository/platform-tools-latest-windows.zip
https://dl.google.com/android/repository/platform-tools-latest-windows.zip
https://dl.google.com/android/repository/platform-tools-latest-linux.zip

【转载】运维如何在工作中寻找亮点

2022-06-04T05:10:19.000Z

这篇文章想跟大家聊一聊运维工程师如何去体现运维工作的价值，或者说运维的绩效可以从哪些方面进行考虑。

前几天在一个技术讨论群里，一位兄弟发起了一个话题：运维要怎么更好地展示自己的业绩，让绩效更好看？🤔

这个话题引发了一番讨论，在这里，我想根据讨论的内容以及自己的想法进行总结，分享一下运维工作可以从哪些方面寻找亮点。🔍

与众多互联网相关岗位相比，运维的工作内容可谓是多又杂，还难以被人关注到，往往只有在系统出现问题的时候，运维才有可能被人关注到。但运维的首要任务，不就是保障系统的稳定性，让系统持续可用嘛，自然不可能为了得到关注而盼着系统出故障，系统总是出现故障也会让他人质疑运维工程师的能力。

那么，运维该如何从日常工作中寻找有价值的工作，以此来体现运维的核心能力呢？我觉得可以从以下几个各方面考虑。

网络设备自动备份工具 Oxidized 使用体验

2022-04-27T15:47:55.000Z

Oxidized 是一个使用 Ruby 编写的开源网络设备配置备份工具，是 RANCID（思科的一个工具）的替代品，轻量级且可扩展的 Oxidized 支持 130 多种操作系统。

体验一下它的功能以及各种实现，看如何能与现有的系统进行整合，或者用 python 造个简单的轮子。

结论：

整体使用感受：作为一个专门的配置备份软件，可以说把一个功能做到了比较高的水平！
亮点功能：可以支持监听设备上报的 syslog 日志中的配置改动来触发配置文件备份，对我来说是一个全新的思路。

目前支持 ios、junos、eos、nsos、aruba，后面有时间可以验证一次。

使用 netmiko 的 is_alive() 方法实现 ssh 保活机制

2022-04-18T15:13:04.000Z

在使用 Netmiko 的过程中，出于某些原因（SSH 新建连接慢、VTY 数量限制等），需要把 Netmiko 已经连接到设备上的 SSH 会话保持住，防止超时。

网络设备的超时时间是按照最后一次接收到命令的时间开始算的（以华三设备为例），所以一般发送一个回车、空字符等等都可以实现保活。

Netmiko 本身提供了一个 is_alive() 方法来对会话进行验证，底层实现是通过发送 null 来做的。

简单记录一下验证过程：

OSPF 最佳实践

2022-04-10T15:28:23.000Z

Router ID

使用 router-id 命令为指定进程手动指定 router-id。
如果 router-id 需要路由可达，配置具有相同 IP 地址的 loopback 接口，并将其宣告在 OSPF 进程下。
在本区域的地址空间中选择一个地址作为 router-id 及 loopback 接口，便于路由发布；或者全网使用单独的网段来配置 router-id
如果其他协议或者功能等需要使用 loopback 接口，尽量使用新的地址

Process ID

OSPF process id 是本地有效的，用来区分不同的 OSPF 进程，但是仍然建议在单进程的情况下全网配置保持一致，这样有利于自动化配置。

认证

邻居路由器两端接口的验证模式必须一致，如果设置了密钥，需要保证密钥一致，认证分为接口认证和区域认证两种。

SSH 端口转发配置

2022-02-14T13:34:56.000Z

SSH开启端口转发需要修改 /etc/ssh/sshd_config配置文件，将 GatewayPorts修改为yes

参数解释：

-f 后台执行ssh指令
-C 允许压缩数据
-N 不执行远程指令
-R 将远程主机(服务器)的某个端口转发到本地端指定机器的指定端口
-L 本地端口转发
-D 动态端口转发

简版：本地端口转发（相当于正向代理），本地监听16379端口，将16379端口的流量都转发给6379端口

1	ssh -fCNL *:16379:localhost:6379 localhost

netbox 在 Ubuntu20 系统上的安装记录

2022-02-09T14:58:04.000Z

NetBox 安装

系统环境：Ubuntu20.04 LTS

netbox 使用问题记录

2022-01-18T12:22:29.000Z

Netbox CSV 导出中文乱码

解决办法

修改文件：./netbox/netbox/netbox/views/generic.py

修改内容：

# 1. 在 import 语句后面添加一个新的类，重写父类 `TableExport`
...
class TableExport2(TableExport):
    def response(self, filename=None):
        response = HttpResponse(content_type="text/csv; charset=utf-8-sig")
        if filename is not None:
            response["Content-Disposition"] = 'attachment; filename="{}"'.format(filename)
        response.write(self.export())
        return response

# 2. 修改 export_table 方法（大约在文件 200 行左右）让其使用重写的类来实例化
class ObjectListView(ObjectPermissionRequiredMixin, View):
    ...
    # 
    def export_table(self, table, columns=None):
        ...
        exporter = TableExport2(
            export_format=TableExport.CSV,
            table=table,
            exclude_columns=exclude_columns
        )
        ...

修改文件后，重启 netbox 服务。如果是容器部署，重启 netbox-docker_netbox_1 容器（暴露端口的那个容器）。

解决过程记录

使用 docker 安装部署 Zabbix5.0 并进行优化

2021-12-29T17:23:33.000Z

架构概览

网络环境不宜说太多：四朵独立的云，中间通过防火墙隔离，需要搭建一套监控系统对全网的网络设备进行监控，通过 Zabbix Server + Proxy 分布式部署方式来实现。

版本选择

截止目前，Zabbix 已经发布了 6.0 pre-release，稳定版也已经来到了 5.4。

在生产环境部署时，为稳定起见，建议使用 Long-term support (LTS) 版本。

本次部署选用的是 Zabbix 5.0 LTS 版本。

HTTP PUT 和 POST 的区别

2021-12-24T09:12:07.000Z

PUT 和POST 是 HTTP 的两个方法(Method)，都可以用来向 HTTP 服务器提交数据。似乎用哪个都可以，但其实两者还是有本质的区别的。

网上关于两者区别的文章比较多，但有相当一部分绝对是误导人。所以这次特意查看了 RFC7231，来澄清二者的区别。

首先直接摘出 RFC7231 中的的部分关键原文：

The fundamental difference between the POST and PUT methods is highlighted by the different intent for the enclosed representation. The target resource in a POST request is intended to handle the enclosed representation according to the resource’s own semantics, whereas the enclosed representation in a PUT request is defined as replacing the state of the target resource. Hence, the intent of PUT is idempotent and visible to intermediaries, even though the exact effect is only known by the origin server.

Proper interpretation of a PUT request presumes that the user agent knows which target resource is desired. A service that selects a proper URI on behalf of the client, after receiving a state-changing request, SHOULD be implemented using the POST method rather than PUT.

上面这两段描述的关键词就是“idempotent”（幂等），理解了这个词就理解了二者的本质区别。下面就围绕这个词从以下几个角度分析 PUT 和 POST 的区别。

Ubuntu apt 报错 Certificate verification failed: The certificate is NOT trusted

2021-11-22T15:09:36.000Z

问题

使用 Windows 系统安装了 Ubuntu 20.04 wsl1.0 子系统之后，照例进行软件更新，修改为清华源之后，执行 apt update 命令报错:

Certificate verification failed: The certificate is NOT trusted. The certificate chain uses expired certificate. Could not handshake: Error in the certificate verification

使用多线程操作 paramiko 执行命令

2021-08-22T16:05:55.000Z

背景

最近公司内网设备版本有些问题，会出现队列丢包现象，由于设备较多，写个脚本定期收集会方便一点，不过内网只有 paramiko，所以简单造了一个轮子，实现多线程并发登录设备执行命令并对结果进行解析。

用这个脚本可以在网络设备上执行任何命令，实现各种功能，而且多线程并发很 Nice！

本次用到的命令及输出示例如下：
# [H3C]dis qos queue-statistics interface outbound | in "^ Drop"
#  Dropped: 0 packets, 0 bytes

这个命令用来收集当前设备上所有接口的所有队列的转发信息累计值（bytes 和 packages）。

一张图了解 Nornir 基础概念及用法

2021-08-02T16:40:42.000Z

分析源码，认识 Nornir

格式化输出NETCONF回显内容

2021-05-26T14:02:49.000Z

在《Python 使用 NETCONF 管理配置 H3C 网络设备》中，简单介绍了 Python 使用 NETCONF 操作网络设备。

对于配置类的操作，即 edit-config，NETCONF 的回显内容一般情况下为 ok 或者具体的报错信息；对于查询类的操作，即 get get-config 等，回显内容为 XML 格式，可读性较差，此时需要对查询到的内容进行格式化。

思路

对于 XML 格式的数据，可以直接使用 XML 模块来进行解析，由于查询信息时，已经传入了一个 XML，那么进行解析时，可以根据这个 XML 来进行操作，使用 lxml 模块来进行实际操作。

针对网络设备的回显信息，先解析为 lxml 支持的格式如 Element ，再使用 lxml 中 find 相关的方法，并添加上命名空间和具体的查询元素，查找到最终想要的信息。

Python 使用 NETCONF 管理配置 H3C 网络设备

2021-04-22T15:23:49.000Z

之前简单介绍了 Python 针对 XML 文件的操作方式，XML 的诸多特性使得它非常适合程序之间的数据传输，NETCONF 就是采用 XML 来进行工作。

NETCONF 简单介绍

NETCONF（Network Configuration Protocol，网络配置协议）是一种基于 XML 的网络管理协议，它提供了一种可编程的、对网络设备进行配置和管理的方法。

NETCONF 报文使用 XML 格式，具有强大的过滤能力，而且每一个数据项都有一个固定的元素名称和位置，所以具有很强的兼容性，不同厂家不同设备可以通过 XML 得到相同的结果，便于混合不同厂商不同设备的为冷热软件开发。

NETCONF 协议结构

NETCONF 采用分层结构，分别为：

Content 内容层
Operations 操作层
RPC（Remote Procedure Call）远程调用层
Transport Protocol 通信协议层

Python lxml 模块操作 XML 的基本使用

2021-03-12T16:28:17.000Z

XML 相关的知识可以在 w3school 上进行了解。
假设你已经对 XML 的基本概念有一些了解，本文介绍了 Python lxml 模块对 XML 的一些操作方法。

lxml is the most feature-rich and easy-to-use library for processing XML and HTML in the Python language.

文中所有代码块都是基于 etree 来操作的，代码同一行后的注释为运行结果。

1	from lxml import etree

使用Netmiko进行交互式操作

2021-02-04T14:46:03.000Z

Netmiko 的 send_command 方法可以很方便的在网络设备上执行命令，如各种 show、发送一些基本配置等；但是如果是交互式的操作，例如拷贝文件、升级系统等需要人工确认的操作，貌似就有点不行了。

其实 send_command 方法提供了这个功能，从它的参数中可以看到，有一个expect_string参数，可以通过这个参数来进行交互式操作。

这个参数就是表面意思： 期望字符串，实际使用中，这里需要传入一个正则表达式，然后 Netmiko 会从返回的文本中搜索该字符串，找到之后即为执行结束，关闭连接。

Netmiko 常用方法

2021-02-03T16:04:48.000Z

之前文章中，介绍了 Netmiko 中 send_command 和 send_config_set 两个方法以及区别。
本篇内容来介绍一下 Netmiko 的常用方法以及应用场景。

命令执行相关

def send_command_timing():

基于时间延迟来执行命令。
如果通过这个方法登录到设备执行命令，不管命令有没有执行完成，Netmiko 都会在指定的时间内结束 SSH 连接，一般不推荐使用。

这里可以对比一下send_command，这个方法会检测设备的提示符，例如>、]、# 等，它会一直等待接收数据，直到检测到提示符后再进行退出（也有一个默认的超时时间）。

我们可以通过delay_factor和max_loops来控制等待时间。

send_command_timing：默认超时时间约为 15 秒，即登录设备 15 秒后关闭 SSH 连接
send_command：默认超时时间约为 100 秒，即 100 秒未检测到提示符就关闭 SSH 连接

Python 使用 Netmiko 连接 H3C 网络设备

2021-02-02T16:24:30.000Z

什么是 Netmiko

是一个基于 paramiko 二次封装的，可以通过 SSH 连接多种网络设备的库，从 3.0 版本以来，加入了对国内厂商的支持，是非常不错的网络自动化工具。

目前支持设备几乎覆盖了市面上大部分设备，包括锐捷、华三、华为、思科、f5 等等，具体的列表见后文。

如何使用

安装

首先需要具备Python3.6以上版本的环境，使用pip可以直接安装。
国内下载速度很慢，可以参考Python 下载加速：pip pypi 使用国内源及永久配置 pip 源进行配置。

1 2	# 安装 pip install netmiko

出现 Successfully installed netmiko 即为安装成功。

使用 pysnmp 查询 H3C 网络设备示例

2020-12-27T12:54:45.000Z

pysnmp 文档：官方文档，查看该模块所有的使用方法

h3c mib 库：华三官方提供的设备 MIB 值

mib 浏览器：可以用来查看 MIB OID 节点

基础环境

Windows 10
python 3.8
pysnmp 4.4.12
HCL

网络拓扑

paramiko 使用证书免密连接 H3C 设备

2020-12-26T08:54:40.000Z

设备配置用户

#
local-user admin class manage
 password simple admin
 service-type ftp
 service-type ssh
 authorization-attribute user-role network-admin
#

产品迭代

2020-07-29T12:23:27.000Z

迭代思维与 MVP 产品规划方法

MVP： minimum viable product 最小可用产品

OOPD：Online&Offline Product Development，线上线下相结合的产品开发方法

内裤原则：MVP包含了产品的轮廓，核心的功能，让业务可以运转
优先线下：能够走线下的，优先走线下流程，让核心的功能先跑起来，快速做用户验证和方案验证
MVP的核心：忽略掉一切的细枝末节，做合适的假设和简化，使用最短的时间开发出来

迭代思维是最强大的产品思维逻辑，互联网上唯快不破的秘诀。

在资源受限的情况下（如人力、时间、资金、技术储备），忽略掉一切细枝末节，做合适的假设和简化，使用最短的时间开发出来简单的功能，之后再进行快速迭代，验证用户的需求。

解决 Django 导出 csv 乱码问题

2020-07-24T14:41:27.000Z

利用 Django 输出 CSV 示例

环境：Python3 + Django 2.2.24

代码编辑器默认的编码是 UTF-8

import csv
from django.http import HttpResponse

def some_view(request):
    response = HttpResponse(content_type='text/csv')
    response['Content-Disposition'] = 'attachment; filename="somefilename.csv"'
    writer = csv.writer(response)
    writer.writerow(['姓名', '性别', '年龄', '地址'])
    writer.writerow(['张三', '男', '18', '北京'])
    return response

Django admin 的使用

2020-07-11T15:29:58.000Z

初始化

创建项目：manage.py startproject project_x
创建应用：manage.py startapp app_x
创建管理用户：manage.py createsuperuser

在 app_x 里面的 models.py 文件中，创建数据库字段（建模），涉及到字段改动时，为了保证数据安全性，建议只新增字段而不直接修改原来的字段，防止 migrate 时操作数据库时出现问题。

# 使用系统自带的鉴权功能
from django.contrib.auth.models import User
JobTypes = [(0, "技术类"),(1, "产品类"),(2, "运营类"),]
class Job(models.Model):
	creator = models.Foreignkey(User,verbose_name="创建人")
	# 使用下拉选项，需要定义一个列表 JobTypes
    job_type = models.SmallIntegerField(
        blank=False, choices=JobTypes, verbose_name="职位类别",help_text="页面上显示的帮助信息。")

kuryr-kubernetes

2020-07-06T13:12:27.000Z

Kuryr-kubernetes 是 openstack neutrn 的子项目。

本身没有网络能力，是将 openstack neutron 的网络能力提供给 k8s。

calico 学习笔记

2020-07-05T13:12:27.000Z

Calico 是针对容器、虚机、物理服务器的网络解决方案

提供 CNI plugin 与 k8s mesos 集成
提供 Libnetwork plugin 与 docker 集成
以 neutron plugin 形式与 openstack 集成
支持 BGP、IPIP 两种方案

Flannel 方案中，master node 上的 flanneld 进程需要始终检测 k8s api 哪些资源发生了变化并同步 etcd，规模较大时，会造成压力。
calico 与 k8s 集成时，使用 BGP 缓解 k8s api 和 etcd 的压力；并且提供了 network policy，实现多个用户之间的网络隔离等。

flannel 学习笔记

2020-07-02T11:17:51.000Z

Flannel 是一种 CNI 解决方案，也可以为 Dokcer 提供服务，对 k8s 而言，是一个网络插件。

实现了 CNI 的网络控制平面软件
属于 coreOS 的子项目
通过配置主机路由或者 overlay，避免对物理路由器进行配置
- VxLAN
- UDP
- Host-GW

bash history 的几个常用选项

2020-06-06T08:07:34.000Z

删除无意义命令

1	export HISTIGNORE='pwd:exit:fg:bg:top:clear:history:ls:uptime:df'

使用该选项后，在历史记录中就不会记录选项后包含的命令。

忽略敏感命令

1	export HISTCONTROL=ignorespace

例如：你不想在历史记录中出现带有密码的命令，可以在输入密码的命令前添加空格，这样就不会保存在历史记录中。

Linux IPv6 操作： ping telnet ssh curl wget

2020-04-27T09:52:16.000Z

1
2


使用 selenium 连接已经打开的 chrome 浏览器
2020-04-23T07:27:29.000Z
最近做在一些 web 自动化（其实是用 web 端来配置网络设备）
编写脚本时经常用到 debug 去提取网页中的一些元素并做测试，但是每次需要 debug 时都要打开新的浏览器，比较麻烦，所以如果能直接连接到已经打开的浏览器，会非常方便。
操作步骤：

使用参数启动浏览器
cmd 定位到 chrome 所在目录，使用以下参数启动：
1
C:\Program Files (x86)\Google\Chrome\Application> .\chrome.exe --remote-debugging-port=9999 --user-data-dir="C:\test"


参数：
port 可以是任意端口，只要不和本地已开放的端口冲突即可；用户目录最好是一个空文件夹，浏览器启动时会以空配置启动，然后将初始化配置放到这个目录里面。
另一种简单的方法：可以在桌面新建一个 chrome 的快捷方式，然后再目标里面写上参数（方便，推荐）。