U-- °LoneWolf°

also ich würde das von Hand mach auch wenns schweine arbeit ist den die pollier maschienen haben die eigenschaft ganz feine mini kratzer zu ma schewn die man nur sieht wenn das liecht richtig drauf fällt. Das sind dann so ne kreise k.a. wie man das näher beschreiben soll

Moin Moin, alsopp zum vergleich meine erste version brauchte für die gleiche seite 6 std. naja und der HTTRACKER ist in etva genauso schnell (vielleicht 10 min schneller). Nur verhaut der sich gelegentlich beim speichern so das wenn ich auf Link A klicke zu seite B komme. Woraus wieder eine mehr arbeit von ca. 2std entseht da man jede seite kontrollieren und geg. korriegieren muss

Alles klar schon mal thx. Was die Anzahal angeht heist das wohl das, dass optimum von Hompage zu Hompage unterschiedlich ist. Da hier beispielsweise die anzahl analysen und Downloads sich auf Wartezeitn usw. auswirkt. @Trux: Die Idee ist gut (Hab ich zu erst so machen wollen) nur leider führte das bei mir zu einer selsamen trägheit, ab einer gewissen Tiefe. Genaue werte habe ich nciht mehr im kopf. Ich vermute das Threads in Threads in Threads nicht so der burner sind. kA warum. Was mir gerade noch spontan eingefallen ist. z.Z. laufe ich bei jedem durchlauf der hauptschleife alle elemente durch und bearbeite sie nur wenn sie noch nicht bearbeitet sind. Wenn ich nun die bereits bearbeiteten elemente einfach raus nehem sollte das auch ncoh mal ein paar minuten rausholen. Achja nur mal ein kleiner Anhaltspunkt brauche derzeit für eine HP mit 10 Ebenen und ca 2000 Dateien 90 min für anaylse download und nachbearbeitung.

Sorry dachte das wäre durch den Namen klar (Von HTTRACKER) damit kannst du Webseiten Abspeichern. Um sie beispeilsweise auf einer cd zur verfügung zu stellen usw. Unsere Intranet Seiten Also da ich den coed aus diversen Gründen hier nicht Posten darfin eine kurze erläuterung Schleife für i < tife i++ { für alle Webseiten in liste {starte Thread Analyse { Öffnet wesite suche nach allen Html Elementen(Bilder, Links usw.) zur liste Hinzufügen } } für alle elemente in liste { Starte Thread Download { Downloade alle elemente die keine website sind wenn sie Website sind änder Datentyp auf website } } } Es gibt eine Thread Funktion für DIe analyse so das mehrer Analysen gleichzeitg laufen können. Genau so für den Download. wird bei enede der analysen auf alle threads gewartet befor der download startet da an dieser stelle ein sync. Statfinden muß Sorry dachte da gäbe es vielleicht einen allgemeinen weg so nach dem schema bei n Threads wird die Performance schlechter.

Hi zusammen. Ich habe einen WebTracker gebaut, dieser läuft über unser seiten und erstellt einen HTML Export. Durch das einbinden von Threads habe ich aus 6 std. ca.2std. hin bekommen. Jetzt ist meine frage kann ich da ncoh weiter optimieren z.b. durch die anzahl der Threads. Also gibt es eine Ideal zahl oder gilt je mehr desto besser so das ich jede analyse und jeden download in einen eigen thread packe?

Hi also ich habe mir jetzt die kombi geräte mal anegesehen und irgendwei tendiere ich mitlerweile zu einem solchen gerät Da hier beide Geräte getrennt von einander sind und somit auch beide getrennt von einander kaput gehen können . Kennt einer von euch solche geräte die vielleicht sogar etwas günstiger sind?

Das Ganze läuft auf einer von der Firma X Angepassten bzw. Kombi version von Jboss Apache und Tomcat

Also wir haben da so ein nettes cms. Um unser Hopmepage auf cd Weitergeben zu können schreibe ich gerde einen Webexport mit angepasster ausgage und einenm kleine Tracking tool das die seite speichert. Das problem besteht nun darin das Medien über ein JSP ausgegeben werden. Leider ist hier wohl ein fehler der bereits der Firma X Gemeldet ist (rückmeldung war bei uns ist alles i.o. das ist ein Microsoft Prob. ...). Denn es fehlt der Content Typ bzw. Dosposition. Somit habe ich einen Kryptischen Dateinamen und keine Endung. Jetzt wollte ich wenigstens irgendwie die endung ermitteln. Ergänzung: Den HTTRacker habe ich schon benutzt und er wird derzeit auch eingesetzt. Leider verzert er aber beim Tracken manchmal die Navigation.

hm ok schonmal thx aber gibts da keine liste oder sowas?

Hi em ist das ein eintrag in der reg von Windows oder was?

hm schade das problem ist halt das die dateien von einem jsp generiert werden. Der IE macht auch irgendwie dierekt ein .pdf oder so daraus nur weiß ich nicht wie ich das machen muss. In dem zusammenhang habe ich nur mal was vom Content Disposition Header gesehen. Leider weiß ich nicht wie ich den beim Download Auslesen kann.

Cool Danke schon mal. Hatte in den Dateien auch schon gesehen das dort sachen wie pdf GIF oder JFIF drin stehen aber dachet irgendwie da müsste es was eindeutigeres geben.

Hallo zusammen, habe mir schon nen wolf gesucht aber leider kann ich keine möglichkeit finden mit der ich den DateiTyp ohne die Erweiterung ermitteln kann. Geht das? Wenn ja wie? und Wenn nein Wie funktioniert es auf dieser seite. Dort kann man beliebeige dateien OHNE Endung angeben und es ermittelt welche Extension dazu gehört. Schonmal Danke im Vorraus

Hallo zusammen das Problem hat sich mitlerweile erledigt. Falls es jemanden intereseirt, Das Problem bestant in der URL. Zeichen wie & sollten dort nicht vorkommen.

Andernfalls gabs in ner CT (glaube ich) sogar schon ne anleitung um XP von usb zu starten.

Hi zusammen, ich bin einen schritt weiter gekommen das problem ist nur leider das Der Stream den ich einlese Leer bleibt. Jemand ne ahnung warum das so ist? Liegt das vielleicht an dem jsp das die Datei aus der Datenbank generiert?

ah Cool danke werds mir heute abend mal ansehen

Hi zusammen habe mal irgendwann von TFT Monitoreen mit integriertem TV-Tuner gehört weiß zufällig einer wo man test Ergebnisse dieser Geräte herbekommt oder hat selbst bereits erfahrungen damit gemacht.

Hi zusammen ich bin gerade dabei mir einen kleinen Downloadmanager zu erstellen. Fürs erste gab es auch keine Probleme normale Seiten und normale Medien alles kein Problem. Den Download der Dateien mach ich mit WebClient Client= new WebClient(); Client.DownloadFile(url,File);// url-> Quelle, File -> Ziel leider gibt es aber mit dieser Methode diverse urls die ich so nicht downloaden kann. z.B. http://server/pfad/fileausgabe.jsp?imgid=12345-6778465-234342-32 Bzw. die daraus erstellten Dateien haben sage und schreibe 0 Byte und na ja idr hängen an solchen links bei uns ca. 2MB Größe Pdf Dokumente. Hat jemand ne Idee was ich Falsch mache achja das ganze ist in C# und hier noch ein alternative die ich gefunden habe. WebRequest req = WebRequest.Create(url); try { WebResponse result = req.GetResponse(); //result.ContentType; Stream ReceiveStream = result.GetResponseStream(); Byte[] read = new Byte[result.ContentLength]; int bytes = ReceiveStream.Read(read, 0, (int)result.ContentLength); while (bytes > 0) { // Note: // The following assumes that the response uses UTF-8 as encoding. // If the content is sent in a ANSI codepage like 932 use something like this: // Encoding encode = System.Text.Encoding.GetEncoding("shift-jis"); //Encoding encode = System.Text.Encoding.GetEncoding("utf-8"); //txtHTML.InnerHtml = txtHTML.InnerHtml + encode.GetString(read, 0, bytes); bytes = ReceiveStream.Read(read, 0, 512); } FileStream fs = new FileStream(File, FileMode.Create); BinaryWriter w = new BinaryWriter(fs); w.BaseStream.Seek(0, SeekOrigin.End); // set the file pointer to the end //because the information we are writing may not be appropriate for the particular //style chosen to write (Eg: the word "Hello" as an integer?), we have to catch //write errors, and informa the user that we could not perform the task try { w.Write(read); } catch (Exception e) { //let the user know that the information could not be written //MessageBox.Show("Fehler beim Schreiben nach "+File); MessageBox.Show(e.Message); } fs.Close(); Leider werden hier andere Dateien gar nicht geladen und das ganze ist mehr als langsam.

Jo schon klar grundsätzlich gilt in der Informatik in meinen augen "Geht nicht Gibt's nicht" Ich suche auch nicht Krampfhaft nach argumenten gegen Frames es ist nur einfach ein punkt der leider zu häufig ausser acht gelassen wird. Da wird dann halt einfach der abstrich gemacht "Ja und dann können die eben nichts auf der seite machen, Hauptsache ist aber das..." Diese Aussage ist leider nciht aus der luft gegriffen sondern wurde mir so an den Kopf geknallt Nach dem ich gesagt hatt das diese sicherheitskodes in Bilder (mir fällt der name grade nicht ein) inerhalb eines Kontaktformulares dafür sorgen das einige menschen mit Sehschwächen das kontaktformular dadurch nicht nutzen können. Zu Frames allgemein ich persönlich mag Frames weil sie das Gestalten und Strukturieren einer HP vereinfachen

Screen Reader kommen eventuell mit FameSets zurecht aber nur weil ein ScreendReader es versteht heist es noch lange nicht das es barierefrei ist. http://www.einfach-fuer-alle.de/artikel/bitvfueralle/tag12/ Grundsätzlich möglich ist der einsatz wie bei allem schon aber es bringt diverse Probleme mit sich die teilweise die nutzungmöglichkeiten gegen null laufen lassen.

Wenn du schon Kreise schließen möchtest dann mach sie bitte rund. Denn auch wenn ich mich wiederhole. NACHTEIL EINES FRAMESET DIE SEITE IST NICHT FÜR JEDEN ZUGÄNGLICH

Sorry habe mich da wohl wieder etwas falsch ausgedrückt was ich damit sagen wollte war eiegntlich nur das man es so weit wie möglich vermeiden sollte.

Wobei man Tabellen auf grund der BITV nicht zum Layouten verwenden sollte. Diese dienen eigentlich ausschließlich zur darstellung und strukturierung von Daten oder sehe ich das falsch? ausnahme z.b. struktur der seite ein Tabelle mit der Navigation usw.(verbessert die darstellung im Textbrowser)

1. Em was versuchst du gerade mitzuteilen? 2. Bringt das den Thread ersteller auch nicht wirklich weiter oder? 3. Ist schön wenn Bots was damit anfangen können aber Bots sind eher schlechte kunden