日常中可能存在文件中包含空行的问题，针对该类问题，可以通过grep或者sed等命令进行整理

• 通过grep进行处理

grep -v '^$' 原始文件 > 结果文件

什么是主从复制

主从复制，是将数据库分为主从节点，主节点源源不断的将数据复制给从节点，保证主从节点中存有相同的数据 有了主从复制，数据就可以有多份副本，这带来了以下几个好处：

1. 提升了数据库的请求处理能力，点个节点支持的读流量有限，部署多个节点，主从节点可以共同提供服务
2. 提升整个系统的可用性，因为从节点有主节点数据的副本，当主节点宕机后，可以立刻提升其中一个从节点为主节点，继续提供服务

import os
import pandas as pd
files = os.listdir(
    '文件目录路径')

# 使用glob匹配所有csv文件
csv_files = [f for f in files if f.endswith('.csv')]
for file in csv_files:
    tmp = "文件目录路径" + file
    df = pd.read_csv(tmp, sep='\t')

docker的基础学习

简单介绍

docker是一种虚拟化技术，虚拟化技术主要分以下三种

1. 硬件虚拟化，底层的技术实现
2. 软件虚拟化，比如常见的虚拟机
3. 容器虚拟化

本地传输文件到服务器

1. 首先在服务器开启端口监听
2. 本地执行上传文件命令

nc -l 监听端口 > example.txt # 服务端

nc 服务器ip 服务器监听端口 < 本地文件地址 # 本地