Static-URL Parameter eingeben (gelöst) (Allgemeines zu Perl)

[thread]20406[/thread]

Static-URL Parameter eingeben [gelöst]

Tags: perl5 Ähnliche Threads

Leser: 18

Articles: hide open all | hide show old branches

+18 replies
kimmy

2017-12-19 11:14

User since
2010-09-10
87 Artikel
BenutzerIn

Hallo zusammen,

Wie kann ich an einer Static-URL einen Parameter eingeben?
Falls ich zum Beispiel folgende Seite crawlen möchte,

http://www.ti.com/packaging/docs/partlookup.tsp

muss ich entweder "Marking on the part" oder "TI part number" als Variable setzen und meine Anfrage an Server schicken. Aber die URL ist feststehend. Wie kriege ich von solchen URL eine Dynamic-URL extrahieren?
- +15 replies
- GwenDragon
  
  2017-12-19 11:24
  User since
  2005-01-17
  14748 Artikel
  Admin1
  Ich teste sowas immer mit aktivierten Browser Entwickler-Tools (Filter HTML-Dokument).
  Da lassen sich dann auch die Form-Daten beim POST rausfinden, welche dann möglicherweise (hier gehts!) als URL-Parameter nutzen lassen.
  
  Die Formular-Werte sind bei meinen Test-Posts in den Code-Boxen.
  
  Bei Suche für "Marking on the part":
  
  Code: (dl )
  
  1 2 3 4
  
  searchType:device keyword:112221 partmarking: partNumber:112221
  
  Das wäre als GET dann so:
  http://www.ti.com/packaging/docs/partlookup.tsp?searchType=device&keyword=1234&partmarking=&partNumber=1234
  
  Bei Suche für "Partnumber":
  
  Code: (dl )
  
  1 2 3 4
  
  searchType:partmark keyword:A partmarking:A partNumber:
  
  Das wäre als GET dann so:
  http://www.ti.com/packaging/docs/partlookup.tsp?searchType=partmark&keyword=A&partmarking=A&partNumber=
  Last edited: 2017-12-19 11:29:03 +0100 (CET)
  die Drachin Gwen
  
  Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten
  - kimmy
    
    2017-12-19 16:30
    
    User since
    2010-09-10
    87 Artikel
    BenutzerIn
    
    super, Danke.
    ich habe auch ein Firefox Add-on gefunden. Das heißt Web Developer. Hier kann man auch unter Form > Convert Form POSTs TO GETs die URL-Parameters rausfinden.
    Vielen herzlichen Dank für die Mühe.
  - +13 replies
  - bianca
    
    2017-12-20 07:46
    
    User since
    2009-09-13
    7016 Artikel
    BenutzerIn
    
    2017-12-19T10:24:23 GwenDragon
    Ich teste sowas immer mit aktivierten Browser Entwickler-Tools (Filter HTML-Dokument).
    
    Wie genau geht das? Und in welchem Browser?
    10 print "Hallo"
    20 goto 10
    - +12 replies
    - GwenDragon
      
      2017-12-20 08:58
      
      User since
      2005-01-17
      14748 Artikel
      Admin1
      
      Bei den meisten so:
      F12 drücken
      Tab Netzwerk
      Filter HTML klicken
      F5
      Auf den gelisteten Request klicken
      Dann dort die Werte auslesen
      Entwickler-Tools nicht schließen
      Dann auf der Website im Formular Daten eingeben und absenden
      Im Netzwerk-Tab dne POST-Request ansehen
      Dann diese Parameter als URL-Parameter in der Adresszeile eingeben
      Schau ob es das richtige Ergebnis auf der Website anzeigt
      Wenn ja, dann sind die richtigen Parameter gefunden
      die Drachin Gwen
      
      Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten
      - +11 replies
      - bianca
        
        2017-12-20 22:52
        
        User since
        2009-09-13
        7016 Artikel
        BenutzerIn
        
        2017-12-20T07:58:22 GwenDragon
        Tab Netzwerk
        Filter HTML klicken
        
        Das war der entscheidende Hinweis. Sehr gut!
        Und wie machst du das im Chrome?
        10 print "Hallo"
        20 goto 10
        
        +10 replies
        
        GwenDragon
        
        2017-12-21 14:32
        
        User since
        2005-01-17
        14748 Artikel
        Admin1
        
        Was mach ich wie in Chrome?
        die Drachin Gwen
        
        Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten
        
        +9 replies
        
        bianca
        
        2017-12-21 21:58
        
        User since
        2009-09-13
        7016 Artikel
        BenutzerIn
        
        Den Filter HTML finde ich im Chrome nicht. Wie machst du das?
        10 print "Hallo"
        20 goto 10
        
        +8 replies
        
        GwenDragon
        
        2017-12-22 10:09
        
        User since
        2005-01-17
        14748 Artikel
        Admin1
        
        Ach so, bei den Chromiums heißt der ja anders.
        
        Im Network Tab → Filter Doc.
        Last edited: 2017-12-22 10:11:09 +0100 (CET)
        die Drachin Gwen
        
        Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten
        
        +7 replies
        
        bianca
        
        2017-12-22 18:16
        
        User since
        2009-09-13
        7016 Artikel
        BenutzerIn
        
        OK und wo sehe ich dann die Formularfelder mit ihren Inhalten?
        10 print "Hallo"
        20 goto 10
        
        +4 replies
        
        GwenDragon
        
        2017-12-22 19:51
        
        User since
        2005-01-17
        14748 Artikel
        Admin1
        
        Das Formular ist im Browserfenster nebendran. Oder was meinst du genau? Wann soll da ein Formular sichtbar werden?
        Bei einem GET-Parameter steht doch nix im Formular.
        die Drachin Gwen
        
        Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten
        
        +3 replies
        
        bianca
        
        2017-12-23 17:44
        
        User since
        2009-09-13
        7016 Artikel
        BenutzerIn
        
        Siehe jan's Antwort. Trotzdem Danke!
        10 print "Hallo"
        20 goto 10
        
        +2 replies
        
        GwenDragon
        
        2017-12-23 18:04
        
        User since
        2005-01-17
        14748 Artikel
        Admin1
        
        Ich habe nur nicht genau verstanden was du brauchtest, deswegen meine Nachfrage.
        die Drachin Gwen
        
        Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten
        
        bianca
        
        2017-12-24 08:59
        
        User since
        2009-09-13
        7016 Artikel
        BenutzerIn
        
        2017-12-23T17:04:02 GwenDragon
        Ich habe nur nicht genau verstanden was du brauchtest
        
        Das stand in msg #187831 im Zitat. :)
        Last edited: 2017-12-24 09:01:01 +0100 (CET)
        10 print "Hallo"
        20 goto 10
        
        +2 replies
        
        jan
        
        2017-12-23 09:21
        
        User since
        2003-08-04
        2536 Artikel
        ModeratorIn
        
        Klick den Request an, dann scroll im Detailbereich ganz runter, da siehst Du dann die Parameter ordentlich aufgelistet und kannst zwischen verschiedenen Ansichten wählen.
        
        bianca
        
        2017-12-23 17:44
        
        User since
        2009-09-13
        7016 Artikel
        BenutzerIn
        
        2017-12-23T08:21:52 jan
        scroll im Detailbereich ganz runter
        
        Danke dir!
        10 print "Hallo"
        20 goto 10
- renee
  
  2017-12-19 13:38
  
  User since
  2003-08-04
  14371 Artikel
  ModeratorIn
  
  Zusätzlich zu @GwenDragons Antwort: Falls die Gegenseite prüft ob es ein GET- oder POST-Request ist, kann man das auch mit den gängigen Perl-Modulen umsetzen. Die meisten haben eine get() und eine post() Methode.
  OTRS-Erweiterungen (http://feature-addons.de/)
  Frankfurt Perlmongers (http://frankfurt.pm/)
  --
  
  Unterlagen OTRS-Workshop 2012: http://otrs.perl-services.de/workshop.html
  Perl-Entwicklung: http://perl-services.de/
- rosti
  
  2017-12-24 10:52
  
  User since
  2011-03-19
  3472 Artikel
  BenutzerIn
  
  Wenn Crawler Seiten requesten erfolgt das nur mit Request Method GET oder HEAD. Sind Parameter im Spiel, werden diese bekanntlich als Query String an den URL gehängt. Mir ist kein Crawler bekannt, der POST Requests feuert, egal ob mit oder ohne Parameter.
  
  Was natürlich nicht heißt, daß man sowas nicht programmieren kann.
  
  MfG

View all threads created 2017-12-19 11:14.