795 collectifs
Cadmos.io
A propos
Votre Partenaire Technique Web3.0
Content·e
A propos
Duo créatif spécialisé dans la stratégie, la formation et le ghostwriting sur les réseaux sociaux.
sources.
A propos
Devenez les sources d'information des journalistes
Les Nouvelles Recrues
A propos
Le recrutement de demain, c'est déjà aujourd'hui !
Thomas & Hugo
A propos
✨ Pour vous accompagner dans toutes vos stratégies de contenu social media, vidéo et identité de marque
SohoAndCo
A propos
💡 Le collectif spécialisé en communication 360 !
SO!
A propos
So ? What are you needs ? 😉
Optimeast
A propos
Jetez l'ancre en position 1 de Google Search
Crocus Technology
A propos
La tech c'est bien, l'humain c'est mieux 🚀
NomAds
A propos
On vous aide à faire croitre votre business grâce à la publicité en ligne
Mesh
A propos
Créateur d'expériences digitales
Call to Action - CTA
A propos
Vos projets nous regardent !
Customerz
A propos
Votre partenaire Customer Success
The Phoners
A propos
La tribu d'experts B2B au service de votre prospection commerciale !
O(n) code
A propos
Make it work, make it right, make it fast
Isto
A propos
Votre histoire, du product au motion..
We Are HANABI
A propos
On accélère la transformation des grandes entreprises.
Nakami Strategy
A propos
Il n’y a jamais eu autant de bruit dehors. Faites vous entendre clairement!
Services de Renseignements Anglais
•Aviation, Aérospatial & Défense•Cybersécurité•ETI - Grande entreprise
Nyja, the Dark Web sensing toolkit
Nyja est une solution modulaire conçue pour aider les chercheurs à étudier le réseau Tor.
Nyja est un outil collaboratif et cross-platform qui permet aux chercheurs d'effectuer une collecte massive de métadonnées, d'archiver les sites web à un instant précis, monitoring automatique des indexers pour découvrir automatiquement les liens .onion, et bien plus encore.
Problématique
Les services de renseignement anglais qui surveillent les marchés du dark web sont confrontés à différentes problématiques :
Il est difficile de découvrir les nouveaux marchés qui apparaissent constamment
Les informations sur les différents marchés évoluent rapidement, ainsi que leur inventaire et moyens de paiements acceptés
Leurs équipes sont à la fois composées d'analystes doivent visualiser la donnée facilement, ainsi que des data scientists qui souhaitent exploiter la donnée.
Objectif
L'objectif est une solution collaborative unifiée qui répond à leurs problématiques de collecte de données dans le temps tout en présentant la donnée dans des formats adaptés à tous profils. Cette solution doit pouvoir être à la fois lancée en local et hébergée sur un serveur.
La solution développée
✅ Une solution dockerisée pour tourner sur toutes plateformes
✅ Un frontend en React pour être facilement exploité par des profils non-tech
✅ Un second frontend via un shell interactif pour travailler facilement la donnée
✅ Une API en Python/Flask qui index et crawl les sites onions
✅ Du Machine Learning avec un classifier qui détecte si les sites sont des marketplaces
✅ Stockage de + de 10GB de données par jour avec une historisation complète via une queue Redis et un MongoDB
Le résultat est une solution hautement configurable qui permet d'indexer et crawler automatiquement des dizaines de milliers de sites sur le réseau Tor et qui stocke à chaque scan les metadata extraites du site, ce qui permet son analyse sur la durée.
Screenshot de l'interface Web
Démo de l'outil en CLI
Membres
Expertises
De
Mai 2021 à Janv. 2022