1. HIGHWAY ist ein Forum und Multihoster.
    Unsere Plattform steht nur überprüften Nutzern zur Verfügung.
    Zur Zeit sind die Registrierungen geöffnet. Die Prüfung einer Registrierung beträgt wenige Stunden.
    Die Prüfung ist notwendig, da sich auf unserer Seite aktuell gut hundert Forenspammer pro Tag registrieren wollen.

Gleichzeitige Transfers im HIGHWAY Cache begrenzen?

Discussion in 'Umfragen' started by Yaknar, Aug 31, 2019.

?

Eine Begrenzung der Anzahl von Dateien pro Nutzer, die parallel aktiv gecacht werden darf?

Poll closed Sep 7, 2019.

  1. Ja, das ist eine gute Idee

    34 vote(s)
    94.4%

  2. Nein, fände ich nicht gut

    2 vote(s)
    5.6%
  1. Yaknar

    Yaknar Administrativer Support Premium Trusted User

    Joined:
    Mar 5, 2015
    Messages:
    4,954
    Likes Received:
    10,197
    Credit:
    381,897MB
    Einige Filehoster laufen über HIGHWAY Cache. Beim Anfordern eines Downloads wird die Datei vom Hoster zuerst auf unsere Festplatte geladen; dort angekommen, dann an euch weitergeleitet.

    Das sorgt für stabilere, schnellere Downloads, bessere Verteilung der Auslastung und höhere Hosterverfügbarkeit. Näheres hier unter Punkt 4 https://high-way.me/threads/auflist...n-bezug-zu-den-highway-dienstleistungen.1441/ und Detailverliebte lesen hier noch mehr https://high-way.me/threads/wichtig...ht-sofort-und-es-kommen-fehlermeldungen.1436/.

    Der jDownloader unterstützt diese Besonderheit schon lange und zeigt euch bei Downloads u.a. von RG und SO zunächst immer Error 503 sowie die Information (Geladen/Insgesamt B).

    Es kommt mehrmals täglich vor - und ja, auch bei mir -, dass der JD dann haufenweise Dateien gleichzeitig anfordert, da er die Liste runterarbeitet. Dadurch können in kürzester Zeit hunderte Dateien mit insgesamt vielen GB die Warteschlange des Caches blockieren.

    Das Problem für diejenigen, die nur eine Datei laden wollen ist, dass der Cache chronologisch arbeitet und deswegen der, der zuerst kommt, auch malt.

    Um das zu verhindern, schlage ich vor, die Anzahl der Einträge, die ein Benutzer gleichzeitig in der Cache-Warteschlange hat, auf 10 zu begrenzen.

    Das bedeutet: Solange die Datei vom Hoster auf unseren Server geladen wird, zählt sie als einer dieser Einträge.

    Nicht zählen: wenn die fertig geladene Datei dann auf unserem Server liegt;
    wenn ihr die Datei dann auf eure Festplatte herunterladet


    Das bedeutet: Lädt Nutzer A ein Downloadpaket mit 100 Dateien, werden 10 Dateien davon gleichzeitig geladen, die restlichen 90 werden schon mal "vorgemerkt" bzw "reserviert". Sobald also eine der 10 Dateien fertig ist, kann eine weitere Datei aus der Vormerkung in den Caching-Prozess gehen - und zwar als neuer Prozess ganz hinten an die Liste - halt wie jede Datei, die zur Caching-Warteschlange dazustößt.
    Hat zwischenzeitlich also Nutzer B eine bis zehn Dateien hinzugefügt, werden erst mal diese behandelt. Dadurch muss Nutzer B nicht immer warten, bis alle 100 Dateien von Nutzer A fertig sind und manchmal auch noch Glück haben, dass bis dahin überhaupt noch ausreichend viel Traffic beim Hoster zur Verfügung steht.

    Was haltet ihr also von diesem Plan, seid ihr dafür, oder dagegen?
    Diese Umfrage ist öffentlich und jeder kann seine Stimme im Nachhinein noch ändern. Umfrage läuft 1 Woche. Für die Ergebnisbegutachtung ist die Stimmabgabe erforderlich.
     
    Last edited by a moderator: Aug 31, 2019
    Yaknar, Aug 31, 2019
    #1
    Mydgard, Sorcerer, unicthorn and 6 others like this.
  2. mmueller

    mmueller Premium Trusted User

    Joined:
    Dec 24, 2015
    Messages:
    174
    Likes Received:
    244
    Credit:
    50,359MB
    Ich finde die Idee gut. Wäre es vielleicht nicht besser die Downloadgröße auch zu berücksichtigen. Die Größe der Parts ist ja recht unterschiedlich. Man könnte so auf einmal beipielsweise maximal 4GB in die Download-Queue einreihen. Alles was darüber hinaus geht landet in einem neuen Block am Ende der Warteschlange.
     
    Last edited by a moderator: Aug 31, 2019
    mmueller, Aug 31, 2019
    #2
    Mydgard and gratiszombie like this.
  3. spritty1300

    spritty1300 Offizieller Supporter Premium Trusted User Beta-Tester

    Joined:
    Mar 24, 2015
    Messages:
    1,647
    Likes Received:
    2,871
    Ich finde die Idee gut! :)
    Hoffentlich ist es kein allzu grosses Problem das fuer Yaknar umzusetzen.
     
    spritty1300, Aug 31, 2019
    #3
  4. spritty1300

    spritty1300 Offizieller Supporter Premium Trusted User Beta-Tester

    Joined:
    Mar 24, 2015
    Messages:
    1,647
    Likes Received:
    2,871
    Wenn ich jetzt noch einmal laenger drueber nachdenke gibt es da leider ein entscheidendes Problem.
    Wenn ich es richtig verstanden habe ist der Sinn der Warteschlange ja der, den Traffic unauffaelliger aussehen zu lassen.
    Also wenn ich z. Bsp. einen 7GB grossen Film mit 200mb Rar Dateien lade, dass diese Dateien nacheinander am Stueck geladen werden. So sieht es aus als wenn nur ein einzelner User den Account verwendet.
    Laesst man jetzt nach 10 Dateien einen anderen User dazwischen ist der Vorteil der Unauffaelligkeit der DL Linkanordnung der Warteschlange wieder hinfaellig oder wie seht Ihr das?
     
    spritty1300, Aug 31, 2019
    #4
  5. 3way

    3way Vollzeit-OS-Ausprobierer Premium Trusted User Beta-Tester

    Joined:
    Jul 14, 2015
    Messages:
    5,222
    Likes Received:
    7,850
    Credit:
    242,814MB
    Um das mal zu paraphrasieren: Die Warteschlange schluckte danach immer noch mehr als 10 Dinge, nur wären die ersten zehn (pro Benutzer, pro Tag) mit einer höheren Priorität. Sehe ich das richtig?

    Wäre dann ja halt bloß blöd(er) für Pakete mit mehr als 10 Links - aber selbst hier wäre der Vorteil, daß 10 davon schon mal eine höhere Prio hätten. So große Pakete sehe ich aber recht selten (zB UHD und 3D Versionen), und dann dauert es eh länger...

    In der Summe scheint das dann eine sinnvolle Verbesserung zu sein :nod:
     
    3way, Aug 31, 2019
    #5
  6. Mydgard

    Mydgard Premium Trusted User Beta-Tester

    Joined:
    Mar 21, 2015
    Messages:
    3,673
    Likes Received:
    4,598
    Ich fände das gut, nutze Downloads ja nur sporadisch (2038er Paket) und habe häufig nur mal einzelne Files (primär RG oder SO) und da fänd ich es dann schon nett/gut, wenn das schon schneller geht und nicht teilweise ewig dauert ;)
     
    Mydgard, Sep 3, 2019
    #6
    maanteel, finchen and 3way like this.
  7. finchen

    finchen Premium Trusted User Beta-Tester

    Joined:
    Apr 26, 2019
    Messages:
    308
    Likes Received:
    913
    Credit:
    184,501MB
    Da schließ ich mich Mydgard an. Ich habe bloß kleine mikrige 10 mb Downloads, Wäre schön wenn die sich schneller zwischen den Poweruser zwischenschummeln und nicht erst am Ende der Warteschlange eingereiht werden.
     
    Last edited: Sep 4, 2019
    finchen, Sep 3, 2019
    #7
    maanteel and Mydgard like this.
  8. Mydgard

    Mydgard Premium Trusted User Beta-Tester

    Joined:
    Mar 21, 2015
    Messages:
    3,673
    Likes Received:
    4,598
    finchen Allerdings muss man ja auch sagen, das die "Poweruser" den Dienst finanzieren und uns gleich mit ... also ist es auch in Ordnung wenn die schneller zu ihrem Zeug kommen ;)

    BTW mein Nick ist "Mydgard" nicht "Mygard" ... irgendwie lassen häufiger Leute mal das D weg ... ich weiß ja das das y irritiert, aber mein Nickname ist quasi Midgard nur mit y und nicht myguard (=Mein Wächter) oder so etwas.
     
    Mydgard, Sep 4, 2019
    #8
    maanteel, finchen and spritty1300 like this.
  9. maanteel

    maanteel Premium Trusted User Beta-Tester

    Joined:
    Mar 22, 2015
    Messages:
    1,036
    Likes Received:
    1,691
    Credit:
    555,998MB
    OT was würden wir ohne unseren lieben Mygard machen... MYGARD4EVER
     
    maanteel, Sep 4, 2019
    #9
    Aiden, HHFrosch, finchen and 2 others like this.
  10. Mydgard

    Mydgard Premium Trusted User Beta-Tester

    Joined:
    Mar 21, 2015
    Messages:
    3,673
    Likes Received:
    4,598
    /slap mamatel ;)
     
    Mydgard, Sep 5, 2019
    #10
    maanteel and spritty1300 like this.