Reverse eMarque file format

[alexduros]

It would be great to reverse eMarque file format (for example, to create a lightweight version of eMarque for a device like tablet or smartphone) !

[defeo]

Do you have .NET? Do you understand its formats. I had a look at it, and it looks hopeless.

eMarque's save folder contains a .zip file, which contains a very promising data.xml. Unfortunately the .zip file is password protected, and I haven't been able to crack it. I have no idea why the .zip file is encrypted, and how the password is generated.

It looks quite hopeless. The only way to go would be to rewrite eMarque from scartch, and that's a lot of work.

By the way, why do we speak English? Who's going to look at this besides French people?

[alexduros]

pour la langue, je sais pas réflexe github sans doute.
donc, non j'avais jeté les yeux dessus mais j'ai jamais installé .NET sur mon mac, c'est l'occasion.

jamais testé de cracké un mdp zip, mais je vois des solutions que à mon avis ont des chances de marcher : http://www.openwall.com/john/ t'as un exemple de zip sous la main ? ☠️ ☠️ ☠️

mais pour ce genre de truc, c'est pas jouable de refaire un format, c'est trop de taf. Et dans l'hypothèse de créer une version light pour mobile, faut que ça puisse marcher avec le format actuel.

[defeo]

John est un crackeur de mots de passe hachés (par exemple le format de /etc/shadow).

Le format zip chiffré est différent : le mot de passe est utilisé directement comme clef de chiffrement. Il n'y a pas de collision de hash à trouver, c'est de la cryptanalyse à l'ancienne. Le format zip est connu pour avoir des sérieuses vulnérabilités, mais pour les exploiter correctement il faut avoir plein de fichiers chiffrés avec le même mot de passe, et ce n'est pas clair pour moi à ce stade que le mot de passe de eMarque soit unique, plutôt que généré de quelque façon débile à la création de l'archive.

Je n'ai pas beaucoup essayé, j'ai juste tenté de faire tourner https://github.com/hyc/fcrackzip sur un unique fichier zippé, et il n'a rien trouvé.

Mais, honnêtement, s'amuser à cracker ce zip, ce serait juste pour le sport, car je vois mal à quoi cela pourrait servir. Il faut aller le chercher le fichier .zip dans le bazar de fichiers générés par eMarque, va l'expliquer à l'utilisateur lambda.

Le vrai format à reverse-engineerer c'est leur format .em tout pourri. J'ai ouvert avec un viewer hexa, et c'est bien dégueulasse.

[alexduros]

👍 c'est la structure de donnée en elle-même ou c'est l'encapsulation dans un format .net qui est dégueu. Je vais récupérer l'exemple du tuto pour voir ça.

By the way, est-ce que tu penses que faire cet effort est utile ou useless ?

[defeo]

c'est la structure de donnée en elle-même ou c'est l'encapsulation dans un format .net qui est dégueu. Je vais récupérer l'exemple du tuto pour voir ça.

Aucune idée. Il y a beaucoup de blobs répétés, comme si un graphe de références avait été aplati naïvement. Je ne sais pas si c'est la faute au format, ou à l'encapsulation.

Par ailleurs, même .NET est juste un educated guess: le logiciel est développé avec .NET 3.5, mais je ne sais pas si le format .em est un truc homemade, ou si ça s'appuie sur .NET.

By the way, est-ce que tu penses que faire cet effort est utile ou useless ?

Completely useless. C'est pour ça que je me suis mis à parser le pdf, ça me semble la seule chose utile qu'on puisse faire.

Écrire un clone de eMarque plus moderne ça pourrait être marrant (mais c'est quand même plein de boulot: leur UX est très soignée). Mais espérer d'avoir un clone interopérable avec la version officielle me semble sans espoir: la fédé se foutra de nos efforts, leur prestataire en aura même peur, et la compatibilité cassera à chaque saison.

La seule façon d'avoir une meilleure eMarque officielle, c'est de monter une boîte et de battre le prestataire de la fédé dans un appel d'offre.

[alexduros]

Je perds espoir en l'existance humaine tellement je me dis que tu as raison 😢
C'est juste que je me dis que dans mon club dans lequel on a déjà du mal à trouver 1 personne pour faire la feuille, le passage à eMarque serait plus gérable avec un truc sur tablette...

[defeo]

Je perds espoir en l'existance humaine tellement je me dis que tu as raison

Il faut reconnaître que c'est quand même un problème complexe.

C'est juste que je me dis que dans mon club dans lequel on a déjà du mal à trouver 1 personne pour faire la feuille, le passage à eMarque serait plus gérable avec un truc sur tablette...

Toi qui es insider, est-ce qu'on va vraiment y passer ? Est-ce que le comité a vraiment affiché une volonté de généraliser eMarque à tous les niveaux ? Car pour des matchs où de toutes façon il y a un OTM désigné, ce n'est pas si pire eMarque.

[alexduros]

Il faut reconnaître que c'est quand même un problème complexe.

Indiénablement. Et que ça marche globalement bien d'ailleurs même si mon point de vue, ça été pensé pour des OTMs qui sont plusieurs et pas pour le sport amateur. Par ailleurs, au-delà d'emarque, c'est juste que je trouve que ça pourrait être cool de pouvoir chercher en live les licences plutôt que de recevoir un fichier de licences, envoyer la feuille direct sur fbi depuis eMarque.

C'est plus que je me dis qu'un side project pour s'amuser et éventuellement aider la fédé vs. monter une boîte et en concurrencer une autre, je me dis qu'il y a quand même quelque chose à faire pour juste donner des idées (ça veut dire quoi déjà bb-ffbb ;p ?)

Toi qui es insider, est-ce qu'on va vraiment y passer ?

Pour le coup, on doit être un des derniers comités en France à ne pas y être passé globalement (bravo, la capitale). Donc oui, on va vraiment y passer. J'ai rien de vraiment officiel, mais les bruits de couloirs disaient que c'était obligatoire en excellence départ (D1) cette année et obligatoire partout l'année prochaine.

Car pour des matchs où de toutes façon il y a un OTM
désigné, ce n'est pas si pire eMarque.

eMarque, c'est top et ça permet de faire les choses proprement. Pour les arbitres, ça gagne un temps précieux. Moi j'adore. Ce qui m'embête, c'est que toutes les structures ne sont pas préparées (ou ne se préparent pas) de la même manière. Dans des "gros" clubs (CSP19, Stade Français, etc.) où il y a des mains (pleins d'équipes, des jeunes qui n'ont que le basket le week-end), ça pose aucun problème de passer à eMarque. Dans des clubs plus "bande de potes" comme le mien, c'est plus compliqué car les mecs ne s'y préparent pas et le modèle d'avoir un PC pour le match, on s'y fera mais je pense qu'on va prendre des amendes bêtement car on ne sera pas clean.

[alexduros]

Par curiosité, j'ai décompilé l'appli pour voir comment était ce fameux fichier.
Donc, c'est une structure de données assez fat Rencontre (que je mettrais pas ici, j'ai pas envie qu'on se fasse DCMA-iser le repo 😆) dans laquelle il y a tout et serializée à l'aide du BinaryFormatter de .NET (https://msdn.microsoft.com/fr-fr/library/system.runtime.serialization.formatters.binary.binaryformatter(v=vs.110).aspx)

[defeo]

Y a-t-il une bibliothèque open pour dé-sérialiser? Mono?

[alexduros]

c'est bon, j'ai une première conversion .em -> .json.
plus qu'à mapper les champs intéressant. pr à venir.

[defeo]

​!!!​

[alexduros]

https://github.com/bb-ffbb/eMarque-eXtract/tree/wip/em-to-json