Guten Abend,
momentan arbeite ich mit 2 Freunden an einem Projekt für das wir einen Server benötigen, der möglichst geringe Latenzzeiten zu mehreren Webseiten hat. Auf dem Server wird ein Windows Server 2019 System laufen und ein Programm, welches in regelmäßigen Abständen möglichst schnell Daten von mehreren Webseiten scrapen und dann verarbeiten soll. Aufgrund der Aktualität, zählt (fast) jede Millisekunde.
Das Problem an der Sache: einige Webseiten liegen in Deutschland, andere in der AWS Cloud in USA. Ich hatte bereits die Webseiten in der AWS Cloud angeschrieben, wo deren Seiten gehostet sind aber entweder gab es keine hilfreiche Antwort oder es heißt, dass die Seiten in der Amazon Cloud liegen.
Nun habe ich mich mal umgeschaut und muss feststellen, dass die AWS Server an verschiedenen Standorten weltweit angemietet werden können und im 24/7 vergleichsweise sehr teuer sind. Angedacht ist ein Server mit 8 Kernen, 32GB Ram, SSD und min. 1Gbit Anbindung. Mehrere Server weltweit anmieten wird auch schnell sehr teuer und die Synchronisation der Server untereinander wird sehr schwierig bis unmöglich.
Meine letzte Idee wäre es einen Server in Deutschland anzumieten, der ohne viele Hops innerhalb Deutschland und rüber in die Staaten kommt. Die beste Variante wäre wohl ein Serveranbieter, der direkt an DE-CIX in Frankfurt angebunden ist. Die wenigen Anbieter sind allerdings auch super teuer. Die günstigeren Anbieter haben ihre Server zwar in Frankfurt aber es ist nicht klar, ob sie direkt an DE-CIX angebunden sind (wie bspw. Datafabrik).
Ich habe selbst einen Webspace bei Netcup, die auch günstige und performante Server anbieten aber scheinbar in Karlsruhe ihr Rechenzentrum haben. Ich weiß nicht, wie es mit deren Anbindung an DE-CIX bzw. die USA aussieht und wie viel Unterschied es ausmacht bei Netcup in Karlsruhe oder Datafabrik in Frankfurt zu hosten.
Lange Rede kurzer Sinn, gibt es eine Möglichkeit die Latenz verschiedener Hoster mit bestimmten Webseiten abzugleichen? Speedtest net bietet so etwas in der Art ja an. Die haben mehrere Server weltweit für ihre Geschwindigkeitsmessungen. Allerdings kann ich nicht zich Server in Deutschland und Amerika anmieten um die Latenzzeiten zu testen.
Habt ihr eine Lösung für das Problem parat oder kommen wir nicht drumherum einen Server in Deutschland und einen in Amerika anzumieten für die bestmögliche Latenz? Wenn ja, wie viel Unterschied macht es denn aus, einen Server von Netcup aus Karlsruhe im Vergleich zu einem aus Frankfurt zu nehmen? Oder kennt ihr vielleicht sogar Serveranbieter, die direkt an DE-CIX hängen und keine astronomischen Preise verlangen?
momentan arbeite ich mit 2 Freunden an einem Projekt für das wir einen Server benötigen, der möglichst geringe Latenzzeiten zu mehreren Webseiten hat. Auf dem Server wird ein Windows Server 2019 System laufen und ein Programm, welches in regelmäßigen Abständen möglichst schnell Daten von mehreren Webseiten scrapen und dann verarbeiten soll. Aufgrund der Aktualität, zählt (fast) jede Millisekunde.
Das Problem an der Sache: einige Webseiten liegen in Deutschland, andere in der AWS Cloud in USA. Ich hatte bereits die Webseiten in der AWS Cloud angeschrieben, wo deren Seiten gehostet sind aber entweder gab es keine hilfreiche Antwort oder es heißt, dass die Seiten in der Amazon Cloud liegen.
Nun habe ich mich mal umgeschaut und muss feststellen, dass die AWS Server an verschiedenen Standorten weltweit angemietet werden können und im 24/7 vergleichsweise sehr teuer sind. Angedacht ist ein Server mit 8 Kernen, 32GB Ram, SSD und min. 1Gbit Anbindung. Mehrere Server weltweit anmieten wird auch schnell sehr teuer und die Synchronisation der Server untereinander wird sehr schwierig bis unmöglich.
Meine letzte Idee wäre es einen Server in Deutschland anzumieten, der ohne viele Hops innerhalb Deutschland und rüber in die Staaten kommt. Die beste Variante wäre wohl ein Serveranbieter, der direkt an DE-CIX in Frankfurt angebunden ist. Die wenigen Anbieter sind allerdings auch super teuer. Die günstigeren Anbieter haben ihre Server zwar in Frankfurt aber es ist nicht klar, ob sie direkt an DE-CIX angebunden sind (wie bspw. Datafabrik).
Ich habe selbst einen Webspace bei Netcup, die auch günstige und performante Server anbieten aber scheinbar in Karlsruhe ihr Rechenzentrum haben. Ich weiß nicht, wie es mit deren Anbindung an DE-CIX bzw. die USA aussieht und wie viel Unterschied es ausmacht bei Netcup in Karlsruhe oder Datafabrik in Frankfurt zu hosten.
Lange Rede kurzer Sinn, gibt es eine Möglichkeit die Latenz verschiedener Hoster mit bestimmten Webseiten abzugleichen? Speedtest net bietet so etwas in der Art ja an. Die haben mehrere Server weltweit für ihre Geschwindigkeitsmessungen. Allerdings kann ich nicht zich Server in Deutschland und Amerika anmieten um die Latenzzeiten zu testen.
Habt ihr eine Lösung für das Problem parat oder kommen wir nicht drumherum einen Server in Deutschland und einen in Amerika anzumieten für die bestmögliche Latenz? Wenn ja, wie viel Unterschied macht es denn aus, einen Server von Netcup aus Karlsruhe im Vergleich zu einem aus Frankfurt zu nehmen? Oder kennt ihr vielleicht sogar Serveranbieter, die direkt an DE-CIX hängen und keine astronomischen Preise verlangen?
