tokeniser

  • verbe 1er groupe auxiliaire avoir transitif ou intransitif

phonétique /tɔ.kɛ.ni.ze/ orthocode to.ke.ni.ser

« tokeniser » comme forme 1 analyse

lemmecatégorieanalyseprononciationfréq.
tokeniser verbe infinitif tɔ.kɛ.ni.ze

Formes, analyses, prononciation et fréquences : base LeXiK (C, noyau). Fréquences en occurrences par million de mots (sous-titres) ; la fréquence d'une analyse est la part de cette analyse dans les corpus étiquetés, celle d'un lemme la somme de ses analyses.

tokeniser verbe

40 formes tokenisa, tokenisai, tokenisaient, tokenisais, tokenisait, tokenisant…
  • tokenisa tɔ.kɛ.ni.za indicatif passé 3e personne singulier
  • tokenisai tɔ.kɛ.ni.ze indicatif passé 1re personne singulier
  • tokenisaient tɔ.kɛ.ni.zɛ[t] indicatif imparfait 3e personne pluriel
  • tokenisais tɔ.kɛ.ni.zɛ[z] indicatif imparfait 1re personne singulier ; indicatif imparfait 2e personne singulier
  • tokenisait tɔ.kɛ.ni.zɛ[t] indicatif imparfait 3e personne singulier
  • tokenisant tɔ.kɛ.ni.zɑ̃[t] présent participe
  • tokenisas tɔ.kɛ.ni.za[z] indicatif passé 2e personne singulier
  • tokenisasse tɔ.kɛ.ni.zas subjonctif imparfait 1re personne singulier
  • tokenisassent tɔ.kɛ.ni.zas[t] subjonctif imparfait 3e personne pluriel
  • tokenisasses tɔ.kɛ.ni.zas[z] subjonctif imparfait 2e personne singulier
  • tokenisassiez tɔ.kɛ.ni.za.sje[z] subjonctif imparfait 2e personne pluriel
  • tokenisassions tɔ.kɛ.ni.za.sjɔ̃[z] subjonctif imparfait 1re personne pluriel
  • tokenise tɔ.kɛ.niz indicatif présent 1re personne singulier ; indicatif présent 3e personne singulier ; impératif présent 2e personne singulier ; subjonctif présent 1re personne singulier ; subjonctif présent 3e personne singulier
  • tokenisent tɔ.kɛ.niz[t] indicatif présent 3e personne pluriel ; subjonctif présent 3e personne pluriel
  • tokeniser tɔ.kɛ.ni.ze infinitif
  • tokenisera tɔ.kɛ.ni.zə.ʁa indicatif futur 3e personne singulier
  • tokeniserai tɔ.kɛ.ni.zə.ʁe indicatif futur 1re personne singulier
  • tokeniseraient tɔ.kɛ.ni.zə.ʁɛ[t] conditionnel présent 3e personne pluriel
  • tokeniserais tɔ.kɛ.ni.zə.ʁɛ[z] conditionnel présent 1re personne singulier ; conditionnel présent 2e personne singulier
  • tokeniserait tɔ.kɛ.ni.zə.ʁɛ[t] conditionnel présent 3e personne singulier
  • tokeniseras tɔ.kɛ.ni.zə.ʁa[z] indicatif futur 2e personne singulier
  • tokeniserez tɔ.kɛ.ni.zə.ʁe[z] indicatif futur 2e personne pluriel
  • tokeniseriez tɔ.kɛ.ni.zə.ʁje[z] conditionnel présent 2e personne pluriel
  • tokeniserions tɔ.kɛ.ni.zə.ʁjɔ̃[z] conditionnel présent 1re personne pluriel
  • tokeniserons tɔ.kɛ.ni.zə.ʁɔ̃[z] indicatif futur 1re personne pluriel
  • tokeniseront tɔ.kɛ.ni.zə.ʁɔ̃[t] indicatif futur 3e personne pluriel
  • tokenises tɔ.kɛ.niz indicatif présent 2e personne singulier ; subjonctif présent 2e personne singulier
  • tokenisez tɔ.kɛ.ni.ze[z] indicatif présent 2e personne pluriel ; impératif présent 2e personne pluriel
  • tokenisiez tɔ.kɛ.ni.zje[z] indicatif imparfait 2e personne pluriel ; subjonctif présent 2e personne pluriel
  • tokenisions tɔ.kɛ.ni.zjɔ̃[z] indicatif imparfait 1re personne pluriel ; subjonctif présent 1re personne pluriel
  • tokenisons tɔ.kɛ.ni.zɔ̃[z] indicatif présent 1re personne pluriel ; impératif présent 1re personne pluriel
  • tokenisâmes tɔ.kɛ.ni.zam[z] indicatif passé 1re personne pluriel
  • tokenisât tɔ.kɛ.ni.za[t] subjonctif imparfait 3e personne singulier
  • tokenisâtes tɔ.kɛ.ni.zat[z] indicatif passé 2e personne pluriel
  • tokenisè tɔ.kɛ.ni.sɛ indicatif présent 1re personne singulier
  • tokenisèrent tɔ.kɛ.ni.zɛʁ[t] indicatif passé 3e personne pluriel
  • tokenisé tɔ.kɛ.ni.ze passé participe singulier masculin
  • tokenisée tɔ.kɛ.ni.ze passé participe singulier féminin
  • tokenisées tɔ.kɛ.ni.ze[z] passé participe pluriel féminin
  • tokenisés tɔ.kɛ.ni.ze[z] passé participe pluriel masculin

Tableau de conjugaison

verbe · transitif

Étymologie. Francisation du verbe anglais tokenize.

  1. Découper automatiquement un texte en unités lexicales grâce à une analyse lexicale.
    • Dans une première phase d’observation, nous avons donc comparé les données du fichier Input sur un même texte qui est tokenisé de deux manières. — site dumas.ccsd.cnrs.fr, 17 décembre 2021
  2. Associer un jeton NFT dans une blockchain à un bien réel.
    • La perspective de « tokeniser des biens », c’est-à-dire de les mettre sur la blockchain, émerge, notamment dans le monde de l’immobilier. — journal 20 minutes, édition Paris-IDF, 14 juin 2023, page 16
    • Lorsqu’un émetteur de jetons souhaite tokeniser un actif financier, celui-ci devra connaître la qualification juridique du token émis. — site beaubourg-avocats.fr, 23 mars 2022
    • Tokeniser un actif immobilier suppose d’associer un jeton numérique inscrit sur une blockchain à un bien immobilier. — site www.dsavocats.com, novembre 2020
  3. Intelligence artificielle En IA générative, remplacer une séquence de motifs par une séquence de tokens.
  4. anglicisme Utiliser le discours des personnes issues des minorités sociales dominées comme caution politique.
    • Quels signes montrent, selon vous, qu’un collectif ou une organisation a réellement considéré la dimension raciale dans son fonctionnement ? Ce n’est pas un atelier ponctuel ou une parole tokenisée [le tokenisme, c’est inclure une minorité uniquement pour cocher une case]. C’est dans les coulisses que cela se voit. Qui prend les décisions, qui s’occupe des tâches administratives ou de soin, qui a droit à la parole ? Ce sont ces détails quotidiens qui révèlent la réalité, pas une performance de diversité sur scène. — Alexandre-Reza Kokabi et NnoMan Cadoret (photographies), « La non-reconnaissance du...
dérivés
détokeniser, retokeniser, tokénisation, tokenisme

Traductions

Anglais
tokenize

Source : « tokeniser », Wiktionnaire, section verbe (CC BY-SA 3.0).

Aucune entité Wikidata ne porte ce nom.