Giter VIP home page Giter VIP logo

sangkak-challenge-ia_1's Introduction

Sangkak-Challenge-IA

SANGKAK-CHALLENGE-IA est un challenge inter-datascientist et de chercheurs / ingénieurs en Traitement Automatique des Langues (TAL) visant à créer des solutions d'intélligence artificielle concrètes sur un jeu de données open-source en langues africaines.

SANGKAK peut se traduire "Calculer en jouant" en yémba (langue parlée dans le département de la Menoua à l'Ouest du Cameroun).

Pourquoi créer ce challenge ?

L'Afrique dispose d'un patrimoine culturel et linguistique sans précèdent. Ses 3000 langues sont encore parmi les langues les plus sous-dotées du monde et ce malgré toutes les initiatives créées ces dernières années sur le continent. Le défis est très grand et nous avons un avantage de taille aujourd'hui pour radicalement changer les choses: les technologies et applications de la data science.

Des groupes de travail se sont constitués sur le continent ces dernières années et ils ont produit des quantités importantes de ressources structurées et non structurées pour les langues africaines. En plus des ressources lexicographiques de l'association NTeALan Social Network, on peut aussi citer celles de l'INALCO, du collectif Masahkane, de Google Research, de Meta et bien d'autres organismes et universités à travers le monde.

Quelques ressources existent et bien même qu'une bonne partie de ces ressources soient privées, il faudrait maintenant les exploiter pour créer de la valeur au sein des sociétés linguistiques concernées. Tout ceci implique aussi d'identifier les problématiques locales, de trouver un lien possible entre ces problématiques et les ressources disponibles. C'est l'une des raisons principales de ce projet challenge.

Edition Février 2023: infos organisationelles

Status
Site web officiel https://sangkak-challenge-ia.ntealan.net In progress
Communauté Slack https://sangkak-challenge-ia.slack.com OK
Edition Février 2022 OK
Thématique Name Entities Recognition (NER) OK
Données sources MasakhaNER 2.0 OK
Langues africaines bbj, bam, ewe, fon, hau, ibo, kin, lug, mos, nya, pcm , sna, swa, tsn, twi, wol, xho, yor, zul OK

Comment participer à cette session de février 2023 ?

Contexte

Le collectif Masahkane, dans le cadre d'un projet commun Lacuna Fund 2022, a créé et évalué des corpus annotés NER, appelé African NER Datasets, dans 20 langues d'Afrique subsaharienne. Les corpus NER produits sous le format CoNLL-03 sont actuellement partagés en open accès sur leur répertoire Github officiel ou dans le dossier data_source de ce répertoire Github.

Les corpus produits ont été évalués sur des taches de NER en se focalisant sur les technologies d'apprentissage par transfert (Transformer) tels que AfriBERTA, AfroXLMR, XLM-R, mBERT, etc. Les résultats obtenus ont été détaillés dans un article accepté à la conférence EMNLP 2022 et accéssible à cette adresse https://arxiv.org/abs/2210.12391. A la lecture de ce document, nous constatons que le Ghomala, langue parlée à l'Ouest du Cameroun, a des résultats moins intéressants en terme de performance comparé aux autres langues évaluées.

Objectifs

L'objectif de cette session est de challenger les participants sur la production d'algorithmes d'IA plus performants pour détecter les entités nommés dans la langue Ghomala en prenant appui sur les travaux réalisés par le collectif Masahkane. Ces questions peuvent vous orienter dans le choix de votre thématique:

  • Quel algorithme d'IA serait plus approprié pour détecter les entités nommés en Ghomala et par extension aux langues bantu ?
  • Comment mieux organiser les données pour ce type de tache en TAL ?
  • Le Ghomala peut-elle être traitée comme toutes les autres langues ? Doit-on parler d'une spécificité Ghomala en TAL ?
  • Quelle application pouvons-nous mettre en place pour aider les linguistes ou locuteurs ghomalaphones à mieux traiter ce problème ?
  • Quelle méthodologie serait mieux adapté pour traiter ce type de tache ?
  • Combinaison approche déterministe / probabiliste serait-elle un plus ?

Dans tous les cas, c'est aux participants de définir leurs objectifs et approches pour proposer une solution de détection NER éfficace sur ces données.

Participer à la session de Février 2023

Pour participer à cette session et challenger les autres participants:

  • Chaque participant ou groupe de participants devra s'approprier les corpus African NER Datasets en clonant ce répertoire git.

  • Vous deviez ensuite créer un répertoire dans votre propre espace Github en adoptant cette structure:

    • /data_source (étant la référence aux corpus NER Masahkane/facultatif)
    • /evaluation
    • /training
    • methodology.md
    • license.md
  • Vous devez ensuite proposer votre solution en respectant cette structure. Vous êtes libre d'ajouter d'autres dossiers ou fichiers supplémentaires de votre choix.

  • Renommez votre dossier par les initiales de votre projet (Exemple: ENR) et créez ensuite une branche avec les mêmes initiales, suivi d'un numéro de version (Exemple: ENR-0.1) et pushez là sur votre repertoire Github personnel. (Nous utiliserons ce lien comme sous-module git du dossier propositions dans ce répertoire officiel du challenge)

  • Revenez sur ce repertoire et inscrivez votre proposition dans le fichier PARTICIPANTS suivant les champs fournis. Faites ensuite un pull request pour que le comité d'organisation valide votre proposition et lie votre repertoire à ce repertoire officiel.

Merci de respecter scrupleusement cette procédure afin que le comité d'organisation puisse au mieux intégrer votre travail au répertoire officiel.

Comité d'organisation

Ce challenge est organisé par NTeALan Research and Developpement en collaboration avec NTeALan Cameroun et NTeALan France.

  • Elvis MBONING (Lead Data scientist NLP/NLU/Chatbot)
  • Jean-Marc Bassahak (Lead Motion Design and web developer)
  • Jules Assoumou (Vice rector of University of Ngaoundéré)
  • ...

Pour toute question complémentaire, n'hésitez pas à contacter le comité d'organisation du challenge par mail ou sur la plateforme Slack.

Sponsors

Ce challenge est sponsorisé par ...

  • ...
  • ...

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.