config

logging.basicConfig( )

use

logging.error

logging.info

https://zhuanlan.zhihu.com/p/562693816

1 工作路径

改变工作目录 os.chdir(path)

2 包的路径

绝对路径

相对路径

添加包的搜索路径

3 文件路径

绝对路径

相对路径

1 大文件处理

1 读入部分数据

df = pd.read_csv( skiprows = , nrows = )

2 分块

pd_chunk=pd.read_csv( chunksize= )

for df in pd_chunk:

​

2 数据统计

describe

3 字符分割

sep=”\001”

sep=”\ |\ |”

4 单元格合并

行可以合并

列可以先转成行

问题

属性

实例属性

类属性

方法

实例方法 self

类方法 @classmethod

静态方法 @staticmethod

https://www.readinghere.com/blog/how-to-use-python-metaclass-cn/

https://blog.csdn.net/sinat_38682860/article/details/102838668

引用

= 完全变

浅拷贝

copy.copy list 里面的list变

深拷贝

copy.deepcopy 完全不变

https://www.cnblogs.com/sunyllove/p/13521471.html

1 多进程

https://www.liaoxuefeng.com/wiki/1016959663602400/1017628290184064

multiprocessing

流程

1. 创建进程池
2. 创建进程
3. 关闭进程池
4. 阻塞主进程

进程返回值

进程调用函数的参数

pandas chunk data 不可以

打印信息

2 多线程

https://www.runoob.com/python/python-multithreading.html

thread