Scaleway CDN
Dans le cadre de Invantive versterkt continuïteit: Overstap naar Europese leveranciers voor betere zekerheid en onafhankelijkheid, Invantive a migré un grand nombre de sites web statiques depuis Amazon Web Services, qui utilisait CloudFront comme CDN avec Lambda@Edge, AWS S3 comme stockage d’objets et AWS WAF, vers Scaleway. Tous ces sites web ne contiennent que des données accessibles publiquement.
Sur Scaleway, on utilise ce qu’on appelle l’« Object Storage » comme alternative à AWS S3. Scaleway propose depuis peu une version de production des « Edge Services » comme alternative à AWS CloudFront. Celle-ci peut être configurée par bucket de stockage d’objets pour agir en tant que CDN.
Cependant, les fonctionnalités d’Edge Services sont relativement limitées et le surcoût est relativement élevé lorsque le nombre de buckets se situe entre 10 et 35 (environ 4 EUR par bucket et par mois, même si le bucket ne contient qu’un seul fichier HTML).
Limitations des Edge Services sur Scaleway
En venant des distributions AWS CloudFront avec Lambda@Edge et AWS WAF, les limitations suivantes ont été constatées :
- Pas de prise en charge des enregistrements ALIAS ni de plusieurs noms par bucket Scaleway / distribution CloudFront : un alias comme
acme.compeut certes être créé dans le DNS, mais il n’est actuellement pas reconnu par Edge Services. Cela signifie qu’un seul nom, commewww.acme.com, peut être configuré par bucket. - Aucune option pour rediriger les requêtes, par exemple de
/vers/index.html, ni pour d’autres redirections. - Aucune gestion des erreurs configurable, par exemple pour les erreurs 404.
- Aucune réécriture des requêtes ou des réponses, comme les en-têtes de cache ou le filtrage des cookies.
- Aucun comportement différencié selon le type de document ou le système sous-jacent, comme par exemple l’intégration entre applications web et contenu statique.
- Aucune possibilité de composition pour combiner des données provenant de plusieurs sources.
- Possibilités limitées de gestion des certificats.
- Aucune alternative à AWS WAF (Web Application Firewall) pour, par exemple, bloquer les attaques DDoS, les requêtes provenant d’origines indésirables, les visiteurs indésirables et les robots d’extraction (web scrapers).
Cela n’empêche pas qu’Edge Services représente une nette amélioration par rapport aux buckets compatibles S3 de Scaleway. Avec sa maturation, Edge Services deviendra sans aucun doute une meilleure alternative à CloudFront et Lambda@Edge.
Pour les sites web statiques relativement simples, peu ou pas affectés par les limitations ci-dessus, Invantive continue d’utiliser Edge Services sur Scaleway. Les sites dédiés avec de gros volumes de téléchargement, comme pour les fichiers binaires, restent également sur Edge Services ; les limitations sont acceptées.
Caddy comme alternative aux Edge Services de Scaleway
Compte tenu de ces limitations, une alternative a été recherchée pour les sites web statiques relativement simples. Le choix s’est finalement porté sur Caddy. Caddy est un serveur web relativement simple et moderne, qui fonctionne sur de nombreuses plateformes et qui, semble-t-il, prendrait également en charge gRPC.
Nginx, Apache et Traefik ont également été envisagés, mais les fonctionnalités modernes et la facilité de configuration pour cet objectif relativement simple ont été déterminantes.
Un avantage supplémentaire de Caddy est qu’il se charge lui-même, pour les sites web publics statiques, de l’obtention et du renouvellement des certificats TLS.
Un surcoût lié au trafic sortant en raison d’une mise en cache plus limitée n’est pas à prévoir : Scaleway comme Stackit ne facturent actuellement aucun frais de transport pour le trafic entrant ou sortant. Il s’agit d’un avantage de prix considérable par rapport à AWS.
Le coût total d’hébergement s’élève à environ 30 EUR par mois, et la charge système devrait représenter quelques pourcents.
Caddy offre une solution simple pour tous les points mentionnés ci-dessus et fonctionne sous Linux, avec du matériel et des processeurs d’origine européenne si nécessaire.
Caddy Server ne remplace pas totalement les possibilités offertes par AWS Lambda avec CloudFront, mais en tant que solution spécifique au domaine des sites web, il remplit son rôle. Un autre avantage d’une solution spécifique à un domaine est qu’elle est relativement simple à configurer et à tester par rapport à AWS Lambda@Edge.
Disponibilité et performances
Les performances seront peut-être légèrement inférieures à celles d’un CDN complet, mais pour la plupart des sites web d’Invantive, depuis la réorientation vers l’Europe, les performances au Brésil, par exemple, n’ont plus vraiment d’importance.
La disponibilité (uptime) sera également peut-être un peu moindre, car l’équilibrage de charge et le basculement (fail-over) doivent être gérés soi-même. Pour les sites web ayant des exigences relativement faibles, cela reste acceptable. Le choix s’est porté sur un serveur simple doté de 2 processeurs ARM64 et de 8 Go de mémoire, qui peut être rapidement déployé à partir de logiciels issus d’un environnement de gestion de versions.
Les sites web hébergés sur Caddy seront également plus vulnérables à une attaque par déni de service distribué (DDoS) par rapport à un CDN protégé par AWS WAF. Étant donné l’impact limité des sites web statiques sur la continuité de l’activité, cela est jugé acceptable.
AWS WAF
Via AWS WAF, toutes les distributions AWS CloudFront étaient prises en charge, notamment avec :
- Le blocage des adresses IP indésirables connues et des visiteurs malveillants connus.
- Le blocage de plusieurs robots d’indexation (web crawlers) tels que * python, Barkrowler, BLEXBot, ltx71, MegaIndex, MauiBot, MJ12bot, SemrushBot, 360Spider, YandexBot, Cloudfind, dotbot, mailru, hubspot, petalbot, coccoc, DataForSeoBot, YandexBot et Daum.
- Le blocage du trafic provenant de l’extérieur de la zone de service.
- Le blocage des visiteurs effectuant un grand nombre de requêtes dans un court intervalle de temps.
- Le blocage automatique des visiteurs présentant un comportement et/ou des intentions malveillantes.
En pratique, environ 20 % de toutes les requêtes HTTP étaient bloquées par AWS WAF. Dans la nouvelle situation pour les sites web statiques, cela entraînera une légère augmentation de la charge.
Afin de réduire les risques de sécurité, y compris pour les sites web statiques, Caddy fonctionne dans un environnement totalement isolé. Un attaquant qui parviendrait à y accéder serait en mesure de modifier le contenu web diffusé. Pour s’en prémunir, plusieurs mesures de contrôle ont été mises en place, qui ne seront pas détaillées ici. D’autres mesures de sécurité ne sont pas non plus décrites ici.
Exemple de configuration Caddy
Caddy est configuré via un fichier de configuration JSON. Un préprocesseur peut également utiliser un format texte un peu plus simple (appelé Caddyfile). Cet exemple se basera sur ce format texte simplifié.
Le Caddyfile commence par un certain nombre d’éléments de configuration génériques qui peuvent être utilisés dans chaque site :
###########################################################################
#
# 1. Configuration globale
#
###########################################################################
{
email info@invantive.eu
admin off
grace_period 10s
servers :443 {
name theservername
}
}
#
# 2. Fragment (snippet).
# Redirige la racine vers la page index.html lors de l'importation.
#
(redirectroot) {
redir / /index.html 301
}
#
# 3. Fragment (snippet).
# Réécrit acme.com/something en www.acme.com/something
# lors de l'importation.
#
(redirectwww) {
redir https://www.{host}{uri} permanent
}
Chaque site web utilise la configuration globale et peut importer les fragments tels que (2) et (3). Par exemple, la définition du site web invantive.nl se présente comme suit :
###########################################################################
#
# 4. invantive.nl
#
###########################################################################
www.invantive.nl
{
import redirectroot
reverse_proxy http://invantive.nl.s3.fr-par.scw.cloud {
header_up Host invantive.nl.s3.fr-par.scw.cloud
header_down Cache-Control "public,max-age=86400,stale-while-revalidate=172800"
}
}
invantive.nl
{
import redirectwww
}
Si Caddy reçoit une requête pour https://invantive.nl/onderwerp, celle-ci correspondra d’abord à invantive.nl. Dans ce cas, grâce à la définition du fragment redirectwww, l’URL est réécrite via une redirection permanente (301) vers https://www.invantive.nl/onderwerp.
La requête pour https://www.invantive.nl/onderwerp est d’abord, si nécessaire, réécrite vers index.html si aucun sujet n’est spécifié, grâce au fragment redirectroot.
Ensuite, l’URL - après modification de l’en-tête HTTP Host - est transmise au bucket Scaleway de l’object storage. Celui-ci est largement compatible avec AWS S3.
Caddy reçoit du bucket les données accompagnées d’en-têtes. Pour ce site web statique, un en-tête HTTP Cache-Control est toujours défini afin de permettre la mise en cache sur un éventuel CDN intermédiaire ainsi que sur l’appareil de l’utilisateur final. Cela remplace une fonctionnalité auparavant active sur Lambda@Edge.
En principe, Invantive laissait toujours les buckets S3 lisibles par tous (world-readable) sur AWS, et cette approche est maintenue sur Scaleway. De cette manière, les fuites d’informations sont détectées le plus rapidement possible, et l’utilisation est évitée pour les objets contenant des données non publiques.
Configuration DNS
À notre connaissance, il n’est pas possible d’utiliser dans AWS Route 53 un enregistrement DNS ALIAS pointant en dehors d’AWS. C’est pourquoi le DNS doit d’abord être hébergé sur une autre plateforme, comme Scaleway DNS.
Dans Scaleway DNS, (en plus des éléments généraux comme les enregistrements CAA) deux enregistrements DNS sont nécessaires pour que l’exemple de configuration ci-dessus fonctionne :
- un enregistrement ALIAS pour
invantive.nlpointant vers le serveur sur lequel Caddy fonctionne, et - un enregistrement CNAME pour
www.invantive.nlpointant vers le serveur sur lequel Caddy fonctionne.