Graylog et node JS

[LotA]

Bonjour à tous,

Je cherche actuellement à utiliser la plateforme de log d'ovh pour stocker les logs de mon api. C'est la première fois que j'utilise cette plateforme et je rencontre quelques difficulté à utiliser le collecteur de donnée flowgger (le seul que j'ai testé actuellement).

Je cherche à pousser mes logs depuis une application nodejs avec le paquet gelf, de ce coté là tout semble fonctionner mais rien n'arrive coté ovh.

Quelqu'un à déjà tenté de faire communiquer la plateforme et une application node js ?

Amicalement

[PierreD]

Bonjour @quentin_lamamy,

Merci pour l'intérêt que vous portez à Logs Data Platform.

Je vous invite à utiliser cette librairie https://github.com/ovh/ovh-winston-ldp que nous utilisons ici à OVH.

Par ailleurs, vous n'avez pas besoin d'outil de collecte pour cet usage. Si vous indiquez à cette librairie votre token et le cluster de destination, le reste suivra.

ovh/ovh-winston-ldp/blob/master/lib/ovh-winston-ldp.js#L22

N'hésitez pas à revenir vers nous pour toute information complémentaire.

Happy Logging!

[LotA]

Merci Pierre,
Je test ça de suite, cela pourrai bien m'eviter de retourner npm de fond en comble à la recherche d'un paquet :)

Pour mon information personnelle, qu'est ce que winston ?

[PierreD]

Winston est l'une des librairies standard de log pour nodeJs.

winston

Notre contribution est un appender Logs Data Platform pour Winston.

[LotA]

Je vois une procédure d'install avec yarn, ovh n'aurai pas un paquet npm ? Cela m'arrangerai grandement pour mes pipes de deployment

[PierreD]

Oui le module est disponible: npm install ovh-winston-ldp

ovh-winston-ldp

[quentin_lamamy]

J'ai essayé
const OvhWinstonLDP = require("ovh-winston-ldp");
const winston = require("winston");

var logger = new (winston.Logger)({
exitOnError: false,
transports: [new OvhWinstonLDP({
        graylogHost: "gra2.logs.ovh.com",
        grayLogHost:"12202",
        graylogOvhTokenKey: "************",
        graylogFacility:"test"
})]

});
console.log(logger.info("Hello world!"));

Mais je ne reçois rien, j'ai oublié quelque chose ?

[PierreD]

Essayez ceci:

const logger = require('winston');
logger.add(require('ovh-winston-ldp'), {
    graylogHost: 'gra2.logs.ovh.com',
    level: 'debug',
    graylogOvhTokenValue: "************************"
});

logger.info("Hello world!");
logger.log('warn', 'Test Log Message', {"anything": 'This is metadata' });

[quentin_lamamy]

Ça marche, je te remercie.

[quentin_lamamy]

Bonjour,

Quel est le SLA du service ? Régulièrement le service ne répond plus avec ce code d'erreur :

 [FATAL LOGGER] { Error: read ECONNRESET
at TLSWrap.onStreamRead (internal/stream_base_commons.js:111:27) errno: 'ECONNRESET', code: 'ECONNRESET', syscall: 'read' }

[PierreD]

Bonjour,

Les connexions sont fermées par le serveur en cas d'inactivité au bout de 5 minutes (TCP FIN).
Est ce que le paramètre autoReconnect est activé dans votre configuration de la librairie ?

ovh/ovh-winston-ldp/blob/master/lib/ovh-winston-ldp.js#L21

[GeoffreyM3]

Merci beaucoup!!! J'ai reussi a configurer mon serveur NodeJS en un clic!!!!

Peut etre qu'une doc avec les langages de bases serait la bienvenue depuis le site directement.
J'ai utilisé logback avec le gelf appender de logstash pour JAVA mais impossible de le faire marcher sur nodeJS avant que je ne trouve votre librairie

[EricM20]

Bonjour,
Je me permets de rebondir sur ce sujet car je suis dans la même situation que toi.
Le Backend de mon application est une API NodeJS sur un VPS d'OVH et je souhaite aussi centraliser mes logs dans la solution Log Data Platform d'OVH.
J'ai donc ajouté le transporter à ma conf Winston (que j'utilisais déjà dans mon projet) puis configuré de cette manière :

const logger = caller => {
  return createLogger({
    // change level if in dev environment versus production
    level: env === "production" ? "info" : "debug",
    format: format.combine(
      format.label({ label: path.basename(caller) }),
      format.timestamp({ format: "YYYY-MM-DD HH:mm:ss" })
    ),
    transports: [
      new OvhWinstonLDP({
       level: "debug",
       graylogOvhTokenValue: "MON-TOKEN"
     }),
      new transports.Console({
        format: format.combine(
          format.colorize(),
          format.printf(
            info =>
              `${info.timestamp} ${info.level} [${
                info.label
              }]: ${JSON.stringify(info.message)}`
          )
        )
      }),...

Cependant, lorsque je redémarre mon API, nodemon me sort une dizaine de messages de ce type :
- Upgrade docs: https://github.com/winstonjs/winston/blob/master/UPGRADE-3.0.md
graylog2 is a legacy winston transport. Consider upgrading:

Rencontres-tu le même "problème" (qui ne semble pas bloquant... enfin pour l'instant :))?
La librairie ovh-winston-ldp semble s'appuyer sur une version obsolète de winston ?
Merci.
Eric