grep massaker nach python portieren

Ich versuche einen Bash einzeiler in Pyhton zu basteln und kam zu der ueberraschenden Erkenntniss, ist ja gar nicht so einfach

Code:

---

zgrep -h -o -E "[a-zA-Z0-9_\.]+\.[A-Z][a-zA-Z0-9_]+Exception" "LogFile" | sed 's/\\n//g' | sed 's/\\t//g' | sort | uniq -c | sort -k 1 -n -r

---

Das ganze fummelt Exceptions aus einem Java Log und zaehlt die einzelnen Exceptions ohne nach eine spezifischen zu suchen

Am Ende sieht das ungefaehr so aus (mit ein wenig mehr code)

Code:

---

                                                                      java.util.concurrent.ExecutionException| (7)
                                                                              javax.ws.rs.ProcessingException| (6)
                                                          com.fasterxml.jackson.databind.JsonMappingException| (6)
                                                                  javax.ejb.EJBTransactionRolledbackException| (5)
                                                org.springframework.dao.IncorrectResultSizeDataAccessException| (3)

---

Meine Frage ist, wie bekomme ich das hin, ohne dass mir der Speicher platzt, in Bash war das ja einfach ;)

Zum einen kannst du an den Unix Pragma festhalten, nämlich Programm genau so zu verknüpfen, wie du das im Bash Skript gemacht hast.
Mit Python würde ich es etwa so lösen:

Code:

---

import re

logContent = '''bla\njava.util.concurrent.ExecutionException\n
    bla\nbla\nbla org.springframework.dao.IncorrectResultSizeDataAccessException bla\n
    java.util.concurrent.ExecutionException\njava.util.concurrent.ExecutionException\n'''
dict = {}
pattern = re.compile('(\w+\.)+\w+Exception')

for match in pattern.finditer(logContent):
    key = match.group(0)
    if key not in dict:
        dict[key] = 1
    else:
        dict[key] = dict[key] + 1
   
for key, val in dict.items():
    print(f'{key}: {val}')

---

Ich habe das in Iphyton ausprobiert, der match beinhaltet nur einen abgeschnittenen Teil der Exception, das selbe auch wenn ich mit der alten regexp rumspiele, sollte also was mit dem match object sein

Code:

---

ttt = "full logline with string com.oneandone.termination.clearance.exceptions.ClearanceFailedException and more"

pattern = re.compile('(\w+\.)+\w+Exception''(.*)')
for match in pattern.finditer(ttt):
    print(match)

<re.Match object; span=(25, 105), match='com.oneandone.termination.clearance.exceptions.Cl>

---

Ich denke da passt schon alles, die print-Anweinsung stellt match eher schlecht da, greif auf die Gruppen zu

Code:

---

import re

ttt = "full logline with string com.oneandone.termination.clearance.exceptions.ClearanceFailedException and more"

pattern = re.compile('((\w+\.)+\w+Exception)(.*)')
for match in pattern.finditer(ttt):
    print(match.group(0))
    print(match.group(1))
    print(match.group(2))
    print(match.group(3))

---

Ausgabe:

Code:

---

com.oneandone.termination.clearance.exceptions.ClearanceFailedException and more
com.oneandone.termination.clearance.exceptions.ClearanceFailedException
exceptions.
 and more

---