CSV Auslesen und Filtern

  • Guten Tag,

    ich finde gerade keinen anfang. Habe hier eine CSV datei die ich auswerten will.
    Will hier die zeilen bekommen, welche eine in einem vorher bestückten Filter datei hinterlegten wörtern beinhaltet.

    Gibts da ne möglichkeit?

    Einmal editiert, zuletzt von DummDumm (29. Oktober 2009 um 15:58)

  • Hi,

    [autoit]

    #include <file.au3>
    #include <array.au3> ; wird nur für _Arraydisplay am Ende gebraucht! kann dann eventuell entfernt werden

    [/autoit][autoit][/autoit][autoit]

    Global $arresult [1], $ardatei, $arfilter
    $file = "C:\test.csv" ; einzulesende csv Datei
    $filter = "C:\meinfilter.txt" ; einzulesende Filterdatei
    $anzahl = 0 ; zaehler für $arresult Array
    ; gffs. noch errorhandling einbauen
    _FileReadToArray ($file, $ardatei) ; lies csv in Array
    _FileReadToArray ($filter, $arfilter) ; lies Filterdatei in Array
    ;Schleife 1 über CSV Inhalt
    For $i = 1 To UBound ($ardatei) - 1
    ;Schleife 2 über Filterarray
    For $j = 1 To UBound ($arfilter) - 1
    ;Wird Wort gefunden, dann schreib es in Result Array
    If StringInStr ($ardatei [$i], $arfilter [$j]) <> 0 Then
    $arresult [$anzahl] = $ardatei [$i]
    $anzahl += 1
    ReDim $arresult [$anzahl]
    EndIf
    Next
    Next
    _ArrayDisplay ($arresult)

    [/autoit]

    ;-))
    Stefan

  • super danke.
    Nun nocheine frage. Eigetnlich müsste ich doch die datei auch über Durchsuchen da rein bekommen oder?

    Bzw funzt das so auch net. habe nun ne csv datei genommen.
    und ne filter.txt erstellt.

    die CSV habe ich umbenannt. Aber irgendwie zeigt der nie Results an ob wohl das wort defenetiv in mehreren zeilen vorhandne ist

    Habe hier mal ein beispiel einer solchen csv

    Spoiler anzeigen


    HansKunz : Bestellung Laptop
    Michael Meier : bestellung Monitor
    Melfis : Stonierung Bestellung

    Nun will ich dann aus so einem Log was bis zu 20 tausend zeilen und mehr hat
    die zeilenhaben wo zb Monitor drinnen vor kommt.
    Und nur die. Das so ein schnelles abarbeiten der Meldungen möglich ist

    3 Mal editiert, zuletzt von DummDumm (29. Oktober 2009 um 13:51)

  • Nachtrag, sry wahr ein fehler von mir.
    es scheint zu gehen, jedoch kommt folgender fehler:

    Line-1
    Error: Array variable has incorrect number of subscripts or subscript dimension range exceeded.

    Dies bekomme ich bei mehreren filter wörtern in der Filter datei
    oder wenn das log zu lang ist.

    Gibt es da abhilfe?

  • Hi,
    1) Hatte den Code nochmal überarbeitet.
    Änderungen:
    rel. am Anfang:
    $anzahl = 0
    In der 2.ten For Schleife:
    $arresult [$anzahl] = $ardatei [$i]
    ReDim $arresult [$anzahl + 1]

    Wenn das immer noch Probleme macht, probier mal:

    [autoit]

    #include <file.au3>
    #include <array.au3> ; wird nur für _Arraydisplay am Ende gebraucht! kann dann eventuell entfernt werden

    [/autoit][autoit][/autoit][autoit]

    Global $arresult [1], $ardatei, $arfilter
    $file = "C:\testcsv.csv" ; einzulesende csv Datei
    $filter = "C:\filter.txt" ; einzulesende Filterdatei
    $anzahl = 0 ; zaehler für $arresult Array
    ; gffs. noch errorhandling einbauen
    ;_FileReadToArray ($file, $ardatei) ; lies csv in Array
    $opfile = FileOpen ($file)
    _FileReadToArray ($filter, $arfilter) ; lies Filterdatei in Array
    if @error Then MsgBox (0,"Filter", "Fehler beim öffnen der Filter Datei. Error: " & @error)
    ;Schleife 1 über CSV Inhalt
    While 1
    ;Lies Zeile für Zeile der Datei ein
    $line = FileReadLine ($opfile)
    If @error = -1 Then ExitLoop
    ;Schleife 2 über Filterarray
    For $j = 1 To UBound ($arfilter) - 1
    ;Wird Wort gefunden, dann schreib es in Result Array
    If StringInStr ($line, $arfilter [$j]) <> 0 Then
    $arresult [$anzahl] = $line
    $anzahl += 1
    ReDim $arresult [$anzahl + 1]
    EndIf
    Next
    WEnd
    FileClose ($opfile)
    _ArrayDisplay ($arresult)

    [/autoit]

    ;-))
    Stefan

  • also das erste script bringt den selben fehler nach wie vor.
    denke es liegt an der anzahl der ergebnisse.
    u

    und script 2 bekomme ich den fehler:

    ERROR: FileOpen() [built-in] called with wrong number of args.
    $opfile = FileOpen ($file)
    ~~~~~~~~~~~~~~~~~~~~~~~~~^

    habe dann nun noch die mod auf 0 gesetze alos foileopen ,0 hinter var nun kommt das:

    Array variable has incorrect number of subscripts or subscript dimension range exceeded.:
    $arresult [$anzahl] = $line
    ^ ERROR


    Habe mal ein mittelmäßiges log geukt sind über 50 000 zeilen.
    Kann es ev liegen das die Array das net kann?

    und noch eine frage, wie kann ich mehr Filter wörter eingeben immer neue zeile oder mit , trennen?

    Einmal editiert, zuletzt von DummDumm (29. Oktober 2009 um 14:45)

  • Hi,

    zu 1) FileOpen mein fehler sry
    zu 2) Wenn er nicht sofort den Fehler bringt, füge nach dem $anzahl += 1 ein ConsoleWrite ($anzahl & @crlf) ein. Dann wissen wir, ab wann das Script aussteigt.
    zu 3) Neue Filterwörter immer als einzelne Zeilen, sonst hast Du Probleme mit dem _FileReadToArray ()

    ;-))
    Stefan

  • das problem ist, der fehler kommt sofort beim starten.
    Das script baut sich netmal auf. Also die Ansicht.

  • [autoit]

    #include <file.au3>
    #include <array.au3> ; wird nur für _Arraydisplay am Ende gebraucht! kann dann eventuell entfernt werden

    [/autoit][autoit][/autoit][autoit]

    Global $arresult [1], $ardatei, $arfilter
    $file = "test.csv" ; einzulesende csv Datei
    $filter = "filter.txt" ; einzulesende Filterdatei
    $anzahl = 0 ; zaehler für $arresult Array

    [/autoit][autoit][/autoit][autoit]

    ; gffs. noch errorhandling einbauen
    ;_FileReadToArray ($file, $ardatei) ; lies csv in Array
    $opfile = FileOpen ($file , 128)
    _FileReadToArray ($filter, $arfilter) ; lies Filterdatei in Array
    if @error Then MsgBox (0,"Filter", "Fehler beim öffnen der Filter Datei. Error: " & @error)
    ;Schleife 1 über CSV Inhalt
    While 1
    ;Lies Zeile für Zeile der Datei ein
    $line = FileReadLine ($opfile)
    If @error = -1 Then ExitLoop
    ;Schleife 2 über Filterarray
    For $j = 1 To UBound ($arfilter) - 1
    ;Wird Wort gefunden, dann schreib es in Result Array
    If StringInStr ($line, $arfilter [$j]) <> 0 Then
    $arresult [$anzahl] = $line
    $anzahl += 1

    [/autoit][autoit][/autoit][autoit]

    ReDim $arresult [$anzahl]
    EndIf
    Next
    WEnd
    FileClose ($opfile)
    _ArrayDisplay ($arresult)

    [/autoit]

    Sorry, habe eignetlich nur den pfad verändert zur filter datei und zur csv.

  • Jup das habe ich wohl danke dir.

    Eine frage da ich unter suche nix .
    Eigentlich müsste ich doch noch nen Gui machen können wo ich ne datei durchsuche und mit nem butten auswerten dann die ausgewählte csv datei durchsucht.

    Ich habe nun ma lgesucht. Gui ist kein problem das mit der datei auswählen ist kein problem sollte ich hinbekommen.
    Nur der befehl für so ein fenster fehlt mir.

    Ev hast denn noch zu hand?

  • habe es mal so gemacht:

    Spoiler anzeigen
    [autoit]

    #include <file.au3>
    #include <array.au3> ; wird nur für _Arraydisplay am Ende gebraucht! kann dann eventuell entfernt werden
    #include <GUIConstantsEx.au3>

    [/autoit] [autoit][/autoit] [autoit]

    #Region ### START Koda GUI section ### Form=
    $Form2 = GUICreate("Log Auswahl", 301, 89, 185, 188)
    $Input1 = GUICtrlCreateInput("", 40, 20, 121, 21)
    $Button1 = GUICtrlCreateButton("Durchsuchen", 176, 20, 75, 25, 0)
    $Button2 = GUICtrlCreateButton("Auswerten", 10, 60, 280, 25, 0)
    GUISetState(@SW_SHOW)
    #EndRegion ### END Koda GUI section ###

    [/autoit] [autoit][/autoit] [autoit]

    Global $arresult [1], $ardatei, $arfilter
    Global $file = $Input1 ; einzulesende csv Datei
    Global $filter = "filter.txt" ; einzulesende Filterdatei
    Global $anzahl = 0 ; zaehler für $arresult Array

    [/autoit] [autoit][/autoit] [autoit]

    While 1
    $nMsg = GUIGetMsg()
    Switch $nMsg
    Case $GUI_EVENT_CLOSE
    Exit
    Case $Button1
    GUICtrlSetData($Input1, FileOpenDialog("Datei öffnen", @ScriptDir, 'Alle Dateien (*.*)'))
    Case $Button2
    ; gffs. noch errorhandling einbauen
    ;_FileReadToArray ($file, $ardatei) ; lies csv in Array
    $opfile = FileOpen ($file , 128)
    _FileReadToArray ($filter, $arfilter) ; lies Filterdatei in Array
    if @error Then MsgBox (0,"Filter", "Fehler beim öffnen der Filter Datei. Error: " & @error)
    ;Schleife 1 über CSV Inhalt
    While 1
    ;Lies Zeile für Zeile der Datei ein
    $line = FileReadLine ($opfile)
    If @error = -1 Then ExitLoop
    ;Schleife 2 über Filterarray
    For $j = 1 To UBound ($arfilter) - 1
    ;Wird Wort gefunden, dann schreib es in Result Array
    If StringInStr ($line, $arfilter [$j]) <> 0 Then
    $arresult [$anzahl] = $line
    $anzahl += 1

    [/autoit] [autoit][/autoit] [autoit]

    ReDim $arresult [$anzahl + 1]
    EndIf
    Next
    WEnd
    FileClose ($opfile)
    _ArrayDisplay ($arresult, " Log Auswertung ")

    [/autoit] [autoit][/autoit] [autoit]

    EndSwitch
    WEnd

    [/autoit]

    Leider wertet er mir nicht aus

  • Hi,

    $file passt nicht mehr.

    1) Ersetze

    [autoit]

    $opfile = FileOpen ($file , 128)

    [/autoit]


    durch

    [autoit]

    $opfile = FileOpen (GUICtrlRead ($Input1) , 128)

    [/autoit]

    2) Zeile Global $file = $Input1 kann gelöscht werden. Wenn überhaupt $file = GuiCTRLRead ($Input1), aber brauchst Du nicht.

    3) Beim Auswerten Button muss noch ne Fehelrbehandlung rein, wenn keine Datei ausgewählt worden ist.

    ;-))
    Stefan