fp =open("e:\\data.log")
for line in fp.readlines(): # 遍历每一行
    filename = line[:14]    # 每行取前14个字母，作为下面新建文件的名称
    content = line[14:]     # 每行取第15个字符后的所有字符，作为新建文件的内容
    with open("e:\\"+filename+".txt","w") as fp2:
        fp2.write(content+"\n")
fp.close()

参考链接[1] .

2 提取目标信息

日志文件每行字符串由空格分隔，例如对第1个字段（IP、时间等）感兴趣，则使用split()方法对每行字符串进行切片，将第1个子字符串存到列表里，用于下一步处理。

示例代码：

#!/usr/bin/python
# -*- coding: UTF-8 -*-
txt = "Google#Runoob#Taobao#Facebook"
# 第二个参数为 1，返回两个参数列表
x = txt.split("#", 1)
print x

输出结果：

['Google', 'Runoob#Taobao#Facebook']

参考链接[2] .

3 统计分析

在上一步骤中，将感兴趣的目标信息存储到列表中，现使用python统计列表元素出现的次数， 参考链接[3] 提供了很多实现方法 [4] ，本文使用collections [5] 中的most_common()方法。

from collections import Counter
def counter(arr):
    return Counter(arr).most_common(2) # 返回出现频率最高的两个数
# 结果：[(2, 3), (1, 2)]

参考链接[ 3 - 4 - 5 ]

完整代码(待整理)：

其他拓展应用，见链接[6-9]

另，研究pandas在数据处理、绘图等方面的应用。

参考链接：

[1] python文件操作--分析系统log并提取有效数据 : https://blog.csdn.net/qq_30758629/article/details/80766583

[2] 菜鸟教程 - Python split()方法 : http://www.runoob.com/python/att-string-split.html

[3] Python统计列表元素出现次数 : https://blog.csdn.net/weixin_40604987/article/details/79292493

[4] get_frequency : https://github.com/KARL13YAN/learning/blob/master/get_frequency.py

[5] collections官方文档 : https://docs.python.org/3/library/collections.html

[6] python读取日志 - 周一到周五早上6点半检查日志中的关键字，并发送相应的成功或者失败短信 : https://blog.csdn.net/shirayukixue/article/details/52120110

日志内容如下：

[16-08-04 06:30:39] Init Outer: StkID:20205 Label:7110 Name:02ͨ Type:3 PriceDigit:4 VolUnit:0 FloatIssued:                                                               0 TotalIssued:                                                               0 LastClose:0 AdvStop:0 DecStop:0
[16-08-04 06:30:39] Init Outer: StkID:20206 Label:9802 Name:982 Type:3 PriceDigit:4 VolUnit:0 FloatIssued:                                                               0 TotalIssued:                                                               0 LastClose:0 AdvStop:0 DecStop:0
[16-08-04 06:30:39] IB Recv DCT_STKSTATIC, Stock Total = 20207 Day=20160804, Ver=1470283608

配置文件如下：

s = 'this is a new technology,and I want to learn this.'
print(s.count('this', 0, len(s)))
#输出为2