分割日志

p8712351

1378107072.936      0 10.10.52.4 TCP_MEM_HIT  200 67716 GET http://www.iche.com/ - NONE  text/html
1378107077.007      0 10.10.52.4 TCP_MEM_HIT  200 593 GET http://www.a.com/ - NONE  text/html
1378107176.062     36 10.10.52.4 TCP_MISS  504 1579 GET http://www.b.com/ - FIRST_UP_PARENT  text/html

童鞋們，有上面這樣格式的一個(gè)日志，其中包含多種url，我想按照url分割日志，將同一個(gè)url的日志放在一起，并且將名字命名為分割后日志中url的名字

alyfrisk

回復(fù) 1# p8712351

1. import re
   
2. 
   
3. result = {}
   
4. 
   
5. with open("t.txt", "r") as fdr:
   
6.     for line in fdr.readlines():
   
7.         urllist = line.rstrip().split(" ")
   
8.         for url in urllist:
   
9.             if re.match("^http", url):
   
10.                 key = url.split("www.")[-1].split(".com")[0]
    
11.                 if not result.has_key(key):
    
12.                     result[key] = []
    
13.                 result[key].append(line.rstrip())
    
14. 
    
15. for name, content in result.items():
    
16.     with open(name + ".out", "w+") as fdw:
    
17.         for line in content:
    
18.             fdw.write(line + "\n")

復(fù)制代碼

conn2011

import re
for row in open(fn,"rb").readlines():
    try:
        open(re.search(r"http://(.+?)/",row).group(1),"w+").write(row)
    except:
        open("nourl.txt","w+").write(row)

yakczh_cu

readlines(): 這是讀出所有行吧，對于日志文件不太合適　

alyfrisk

回復(fù) 3# conn2011

這個(gè)不錯(cuò)，夠簡潔！
   

pitonas

不錯(cuò) 3樓

p8712351

謝謝各位，我參考了1樓的了，之后忘記感謝各位了，抱歉

sageskr

#!/usr/local/bin/python
#-*- encoding:utf8 -*-
#author:sageskr
import re,time
input_log = open("/home/work/python/temp/log",'r')
input_log.seek(0,0)
while True:
    line = input_log.readline()
    if not line:
        time.sleep(1)
    else:
        regex_url = re.compile(r"http://([^/]+)")
        rt = regex_url.search(line).group(1)
        out_log = open('/home/work/python/temp/%s_log' %(rt),'a')
        out_log.write(line)
        #print >> out_log,line
        out_log.flush()
        out_log.close()


我這個(gè)可以實(shí)時(shí)的采集日志，并匯總輸出。希望不吝賜教