# Tokenizer

# Introduction

Les fonctions tokenizer fournissent une interface au tokenizer PHP interne au moteur Zend. En utilisant ces fonctions, il est possible d'écrire ses propres outils d'analyse ou de modification de code source PHP, sans avoir à se soucier de la spécification du langage au niveau lexical.

Voir aussi l'appendice sur les tokens.

- Installation/Configuration
  - Installation
- Constantes pré-définies
- Exemples
- PhpToken — La classe PhpToken
  - PhpToken::__construct — Renvoie un nouvel objet PhpToken
  - PhpToken::getTokenName — Renvoie le nom du token.
  - PhpToken::is — Indique si le token est d'un type donné.
  - PhpToken::isIgnorable — Indique si le token sera ignoré par l'analyseur PHP.
  - PhpToken::__toString — Retourne le contenu textuel du token.
  - PhpToken::tokenize — Sépare le code source donné en tokens PHP, représentés par des objets PhpToken.
- Fonctions Tokenizer
  - token_get_all — Scinde un code source en éléments de base
  - token_name — Retourne le nom d'un élément de code source

`↑` and `↓` to navigate • `Enter` to select • `Esc` to close • `/` to open