Hier, de 9h30 à 10h30, l’intégralité du Cloud Girofle a été inaccessible. La faute à notre hébergeur (OVH) qui a fait une fausse manip et a rendu l’intégralité de ses serveurs inaccessible pendant près d’une heure.
L’accès est revenu à la normale.
Étiquette : Incident
Incidents en cours et terminés
Pendant une semaine environ, à la rentrée (la semaine du 8 au 12 septembre 2021), un des serveurs de stockage du Cloud Girofle a été régulièrement saturé, avec des temps de réponse anormalement longs, qui rendaient l’usage de l’espace de stockage de documents difficile à utiliser.
Il nous a fallu quelques jours pour trouver une solution, et le problème est normalement réglé.
Bonjour à tous⋅tes,
Depuis vendredi 25/06, 9h30, notre CHATON est lent à répondre et l’accès aux documents partagés est très ralenti. Nous sommes encore en train d’essayer de comprendre ce qu’il se passe et nous en excusons. Nous vous tiendrons informé⋅es dès que possible.
[Edit du 26/06] Depuis 6h ce matin, les choses sont revenues à la normale, un de nos scripts de monitoring faisait des siennes.
Catégories
[résolu] incident de sécurité
Bonjour,
Aujourd’hui, nous avons fait une bêtise et avons par erreur publié les clés d’accès aux API des instances Nextcloud sur notre dépôt git. Ces clés sont celles que nous utilisons pour faire le monitoring des instances
Mais c’est incompréhensible ! Qu’est-ce que cela veut dire ?!
En langage plus simple, nous avons par erreur rendu disponible sur internet les mot de passe permettant d’accéder à toutes les instances Nextcloud.
Concrètement, nous nous sommes rendus compte de l’erreur et l’avons corrigée au bout de deux heures. Nous avons révoqué toutes les clés et supprimé l’enregistrement public.
Nous sommes confiants que les données stockées sur le Cloud Girofle n’ont ni été accédées, ni modifiées. Nous rendons néanmoins public cette erreur dans un souci de transparence.
Plusieurs personnes nous ont fait part de problèmes occasionnels de perte de données. Après un travail sur un document partagé OnlyOffice, il pouvait arriver rarement que le document ne soit pas enregistré dans l’espace de stockage NextCloud.
Nous avons travaillé sur la fonction auto-save. Ainsi désormais :
- les modifications sont automatiquement enregistrées sur le serveur au fur et à mesure de la saisie du document (comme c’était le cas
auparavant). Néanmoins, le fichier .docx synchronisé par Nextcloud n’est pas automatiquement synchronisé - Un appui sur Ctrl+S force la synchronisation, et le fichier .docx de Nextcloud est mis à jour.
- Même sans appui sur Ctrl+S, le fichier .docx est mis à jour dans la
minute suivant la fermeture de la fenêtre d’OnlyOffice.
Nous pensons que ces modifications devraient permettre de réduire
grandement les problèmes de perte de données.
Bonjour chèr⋅es membres et utilisateur⋅ices du Cloud Girofle.
Ce 16 mars 2021 entre 16h20 et 17h20, nous avons redémarré le service OnlyOffice ce qui a provoqué une perte de données pour certains d’entre vous.
En effet nous avons remarqué que tant que le fichier reste ouvert dans OnlyOffice (mode édition), il est possible que le fichier ne soit pas enregistré sur Nextcloud. Si l’incident est survenu alors que le fichier était encore ouvert, alors une perte de données est possible.
Nous avons mis à jour OnlyOffice vers la version 6.0 ce qui nous a notamment permis d’activer un nouvelle fonctionnalité nommée « Force Save ». Cette fonctionnalité permet de sauvegarder automatiquement les modification OnlyOffice dans Nexcloud au lieu de le faire uniquement à la fermeture du document ou lors du clic sur la disquette 💾
Plus de détail sur cette nouvelle fonctionnalité ici (en anglais): https://www.onlyoffice.com/blog/2020/04/save-and-force-save-in-onlyoffice-never-lose-a-document/?utm_source=blog&utm_medium=article&utm_campaign=connector_v.6.0.0_for_nextcloud
Veuillez nous excuser pour tout désagrément que cela a pu vous causer.
[EDIT du 2/03/2021] OVH a identifié et résolu un problème affectant le serveur, nous attendons quelques jours pour vérifier que tout fonctionne correctement.
Bonjour chèr⋅es membres et utilisateur⋅ices du Cloud Girofle. Depuis deux jours, un de nos serveurs hébergeant des instances Nextcloud rencontre des problèmes d’accès réseau, engendrant des redémarrages intempestifs et des indisponibilités.
Nous sommes en train de collecter des informations pour résoudre le problème.
L’édition en ligne de documents partagés a été interrompue pendant une douzaine d’heures, le 23/02/2021 entre minuit et midi environ. La plupart des instances ont été affectées. Nous avons dû redémarrer l’instance en dernier recours, ce qui a affecté tout⋅es les utilisateur⋅ices pendant quelques minutes aux alentours de midi.
Nous sommes en train d’identifier la cause de cet incident.
Bonjour,
Le Cloud Girofle n’a pas été très doué ces derniers jours pour configurer ses serveurs. Nous souhaitons vous informer de deux incidents :
Premièrement : site indisponible
Alors, le site https://girofle.cloud a été indisponible pendant à peu près 24h. C’est notre faute, on apprendra à mieux lire la documentation la prochaine fois.
À part le site https://girofle.cloud, tout le reste (instances Nextcloud et documents collaboratifs) sont normalement restés accessibles.
Deuxièmement : pas d’IPv6
Pour l’instant, https://girofle.cloud n’est pas accessible en IPv6, on y travaille. Cela concerne également plusieurs autres instances hébergées sur le même serveur.
[EDIT janvier 2021] : nous avons mis à jour le logiciel de documents partagés, pour lever cette limitation. OnlyOffice est désormais en version 6.0.
[EDIT du 21/12/2020] : une résolution partielle est en place, voir ci-dessous.
Bonjour,
Nous souhaitons vous présenter une limitation actuelle des documents partagés du Cloud Girofle, sur laquelle nous travaillons actuellement.
Il n’est pas possible que plus de 20 onglets de documents partagés soient ouverts en même temps (en cumulé chez tous les utilisateur⋅ices). Lorsque cette limite est dépassée, le message suivant s’affiche :
Nous travaillons en ce moment pour résoudre ce problème. En attendant, les documents sont de nouveau accessibles en écriture dès que le nombre d’onglets ouverts redescend en-dessous de 20. Pensez à fermer les documents que vous n’utilisez pas, pour limiter les effets de cette limite. Vous pouvez suivre la saturation du serveur en temps réel.
Il est également possible qu’un message d’erreur s’affiche en disant que vous n’avez pas les droits pour éditer le document sur lequel vous travaillez. Ce problème est dû à la même limitation.
[EDIT du 21 décembre 2020] : Nous avons commencé à déployer un correctif à ce problème. Les utilisateur⋅ices de https://chif.fr ne devraient plus voir ce message. Ce correctif devrait soulager tout⋅es les utilisateur⋅ices. Si celui-ci s’avère satisfaisant, nous le déploierons pour tout le monde dans les jours qui viennent.