Tokens - Historial de revisiones

Javiermartin jc: Texto reemplazado: «
» por «»

2019-08-15T07:05:36Z

Texto reemplazado: «<div align="justify">» por «»

Mayle en 19:50 29 nov 2018

2018-11-29T19:50:07Z

Majibacoa2 jc en 12:44 3 may 2011

2011-05-03T12:44:00Z

Majibacoa2 jc en 12:02 3 may 2011

2011-05-03T12:02:01Z

Majibacoa2 jc en 11:57 28 abr 2011

2011-04-28T11:57:26Z

Majibacoa2 jc en 11:56 28 abr 2011

2011-04-28T11:56:41Z

Majibacoa2 jc en 11:52 28 abr 2011

2011-04-28T11:52:43Z

Majibacoa2 jc en 11:50 28 abr 2011

2011-04-28T11:50:24Z

Javiermartin jc en 17:24 25 abr 2011

2011-04-25T17:24:02Z

Majibacoa2 jc en 18:53 2 abr 2011

2011-04-02T18:53:11Z

← Revisión anterior		Revisión del 07:05 15 ago 2019
Línea 1:		Línea 1:
−	{{Definición\|Nombre=Tokens (Informática) \|imagen= \|concepto=Es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}~~<div align="justify">~~'''Tokens'''. También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), [[Identificadores\|identificadores]], números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>	+	{{Definición\|Nombre=Tokens (Informática) \|imagen= \|concepto=Es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}'''Tokens'''. También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), [[Identificadores\|identificadores]], números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
	== Tokens<br> ==		== Tokens<br> ==

@@ Línea 34: / Línea 34: @@
 *[[Analizador sintáctico|Analizador sintáctico]]
 *[[Intérpretes|Intérpretes]]
 *[[Compilador (Informática)|Compiladores]]
 *[[Analizador sintáctico LL|Analizador sintáctico LL]]

@@ Línea 14: / Línea 14: @@
 === [[Identificadores|Identificadores]]<br>  ===
-Es un conjunto de caracteres alfanuméricos de cualquier longitud que sirve para identificar las entidades del programa (clases, funciones, variables, tipos compuestos, Etc.) Los identificadores pueden ser combinaciones de letras y números. Cada lenguaje tiene sus propias reglas que definen como pueden estar construidos. En el caso de C++, son las que se indican a continuación. Cuando un identificador se asocia a una entidad concreta, entonces es el "nombre" de dicha entidad, y en adelante la representa en el programa. Por supuesto puede ocurrir que varios [[identificadores|identificadores]] se refieran a una misma entidad.<br>
+Es un conjunto de caracteres alfanuméricos de cualquier longitud que sirve para identificar las entidades del programa (clases, funciones, variables, tipos compuestos, Etc.) Los identificadores pueden ser combinaciones de letras y números. Cada lenguaje tiene sus propias reglas que definen como pueden estar construidos. En el caso de C++, son las que se indican a continuación. Cuando un identificador se asocia a una entidad concreta, entonces es el "nombre" de dicha entidad, y en adelante la representa en el programa. Por supuesto puede ocurrir que varios [[Identificadores|identificadores]] se refieran a una misma entidad.<br>
 === Constantes<br>  ===
@@ Línea 20: / Línea 20: @@
 La palabra constante tiene dos connotaciones sutilmente diferentes aunque relacionadas, que conviene distinguir:<br>1- La primera es el sentido normal de la palabra constante en lenguaje natural; es decir, datos (de cualquiera de los tipos posible) cuyos valores se han definido en el momento de escribir el código del programa, y no pueden ser modificados más tarde en tiempo de ejecución (lo que significa que sus valores deben ser resueltos en tiempo de compilación). Dicho en otras palabras: el [[Compilador (Informática)|compilador]] sabe cual es el valor de los objetos declarados como constantes y en base a este conocimiento puede hacer cuantas suposiciones sean válidas para conseguir la mayor eficiencia en tiempo de ejecución.<br>En este sentido, el concepto constante es justamente el opuesto a variable, que corresponde a aquellos objetos-dato que pueden recibir nuevas asignaciones de valor a lo largo del programa. Dicho en otras palabras: entidades cuyo valor solo es conocido en tiempo de ejecución.<br>2. La segunda connotación es la de tipo de objeto-dato. En este sentido podemos afirmar que en [[C++|C++]] los enteros ([[Variables|variables]]) forman un tipo distinto de los enteros constantes (constantes enteras), y que los caracteres (variables) forman un tipo distinto de las constantes carácter. Así pues, distinguimos entre un tipo char y un tipo const char. Como prácticamente todos los tipos de objeto-dato posibles en [[C++|C++]] puede declararse constantes, existe un universo de tipos [[C++|C++]], simétrico al de los tipos de objetos variables, pero de objetos constantes.<br>Como corolario de lo anterior, tenga en mente que, por ejemplo, un entero y una constante entera son tipos distintos y que una constante entera [[C++|C++]] significa algo más que un entero al que no se le puede cambiar su valor.<br>
-=== Operadores<br>  ===
+=== [[Operadores|Operadores]]<br>  ===
 Son un tipo de tokens que pueden aparecer en las expresiones, e indican al compilador la realización de determinadas operaciones matemáticas, lógicas y numéricas. Se aplican a variables u otros objetos denominados operandos y su efecto es una combinación de las siguientes acciones:<br>1. Producir un resultado-valor<br>2. Alterar un operando<br>3. Designar un objeto o función.<br>
@@ Línea 26: / Línea 26: @@
 === Signos de puntuación<br>  ===
-Juegan el mismo papel que sus homónimos en el lenguaje natural escrito. Conocidos también como puntuadores, son los que se citan a continuación. La mayoría de ellos tienen un doble uso y en ocasiones funcionan también como operadores <br>[ ] ( ) { } ,&nbsp;;&nbsp;: ... * = #&nbsp;!&nbsp;% ^ &amp; – + | ~ \ ' " &lt; &gt;&nbsp;? . /
+Juegan el mismo papel que sus homónimos en el lenguaje natural escrito. Conocidos también como puntuadores, son los que se citan a continuación. La mayoría de ellos tienen un doble uso y en ocasiones funcionan también como [[Operadores|operadores]] <br>[ ] ( ) { } ,&nbsp;;&nbsp;: ... * = #&nbsp;!&nbsp;% ^ &amp; – + | ~ \ ' " &lt; &gt;&nbsp;? . /
 En ocasiones, los operadores y signos de puntuación comparten la misma representación escrita. En estos casos, el sentido debe deducirse del contexto y por la forma en que están agrupados los diversos signos.<br>Una vez entregado el fuente al [[Compilador (Informática)|compilador]], es precisamente el analizador sintáctico ("parser") el encargado de es identificar los tokens. Por ejemplo, la sentencia<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; int i; float f;<br>es descompuesta por el "parser" en los siguientes tokens:<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; int palabra clave<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; i identificador<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;; puntuador<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; float palabra clave<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; f identificador<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;; puntuador

@@ Línea 1: / Línea 1: @@
-{{Definición|Nombre=Tokens (Informática) |imagen= |concepto=Es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}<div align="justify">'''Tokens'''. También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo,&nbsp;:=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
+{{Definición|Nombre=Tokens (Informática) |imagen= |concepto=Es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}<div align="justify">'''Tokens'''. También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), [[Identificadores|identificadores]], números, signos, o un operador de varios caracteres, (por ejemplo,&nbsp;:=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
 == Tokens<br>  ==
@@ Línea 12: / Línea 12: @@
 Son identificadores utilizados por el lenguaje para fines especiales, y no pueden ser utilizadas como identificadores (por esta razón se suelen denominar también palabras reservadas). Por ejemplo, no pueden ser utilizadas como nombres de [[Variables|variables]], clases o funciones.<br>
-=== Identificadores<br>  ===
+=== [[Identificadores|Identificadores]]<br>  ===
-Es un conjunto de caracteres alfanuméricos de cualquier longitud que sirve para identificar las entidades del programa (clases, funciones, variables, tipos compuestos, Etc.) Los identificadores pueden ser combinaciones de letras y números. Cada lenguaje tiene sus propias reglas que definen como pueden estar construidos. En el caso de C++, son las que se indican a continuación. Cuando un identificador se asocia a una entidad concreta, entonces es el "nombre" de dicha entidad, y en adelante la representa en el programa. Por supuesto puede ocurrir que varios identificadores se refieran a una misma entidad.<br>
+Es un conjunto de caracteres alfanuméricos de cualquier longitud que sirve para identificar las entidades del programa (clases, funciones, variables, tipos compuestos, Etc.) Los identificadores pueden ser combinaciones de letras y números. Cada lenguaje tiene sus propias reglas que definen como pueden estar construidos. En el caso de C++, son las que se indican a continuación. Cuando un identificador se asocia a una entidad concreta, entonces es el "nombre" de dicha entidad, y en adelante la representa en el programa. Por supuesto puede ocurrir que varios [[identificadores|identificadores]] se refieran a una misma entidad.<br>
 === Constantes<br>  ===

← Revisión anterior		Revisión del 11:57 28 abr 2011
Línea 1:		Línea 1:
−	{{Definición\|Nombre=Tokens (Informática) \|imagen= \|concepto=~~También llamado componente léxico es~~ una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}<div align="justify">'''Tokens'''. También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>	+	{{Definición\|Nombre=Tokens (Informática) \|imagen= \|concepto=Es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}<div align="justify">'''Tokens'''. También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
	== Tokens<br> ==		== Tokens<br> ==

← Revisión anterior		Revisión del 11:56 28 abr 2011
Línea 1:		Línea 1:
−	{{Definición\|Nombre=Tokens (Informática) \|imagen= \|concepto=También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}<div align="justify">~~ ~~'''Tokens'''. También llamado ~~'''~~componente léxico~~'''~~ es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>	+	{{Definición\|Nombre=Tokens (Informática) \|imagen= \|concepto=También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}<div align="justify">'''Tokens'''. También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
−
	== Tokens<br> ==		== Tokens<br> ==

@@ Línea 1: / Línea 1: @@
-{{Definición|Nombre=Tokens (Informática) |imagen= |concepto=También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}&nbsp;'''Tokens'''. También llamado '''componente léxico''' es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo,&nbsp;:=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
+{{Definición|Nombre=Tokens (Informática) |imagen= |concepto=También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}}<div align="justify">&nbsp;'''Tokens'''. También llamado '''componente léxico''' es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo,&nbsp;:=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
 == Tokens<br>  ==
@@ Línea 30: / Línea 30: @@
 En ocasiones, los operadores y signos de puntuación comparten la misma representación escrita. En estos casos, el sentido debe deducirse del contexto y por la forma en que están agrupados los diversos signos.<br>Una vez entregado el fuente al [[Compilador (Informática)|compilador]], es precisamente el analizador sintáctico ("parser") el encargado de es identificar los tokens. Por ejemplo, la sentencia<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; int i; float f;<br>es descompuesta por el "parser" en los siguientes tokens:<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; int palabra clave<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; i identificador<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;; puntuador<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; float palabra clave<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; f identificador<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;; puntuador
+</div>
 == Véase también<br>  ==

← Revisión anterior		Revisión del 11:50 28 abr 2011
Línea 1:		Línea 1:
−	{{~~Normalizar~~}}	+	{{Definición\|Nombre=Tokens (Informática) \|imagen= \|concepto=También llamado componente léxico es una cadena de caracteres que tiene un significado coherente en cierto lenguaje de programación}} '''Tokens'''. También llamado '''componente léxico''' es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>
−	'''Tokens'''. También llamado '''componente léxico''' es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>

	== Tokens<br> ==		== Tokens<br> ==

← Revisión anterior		Revisión del 17:24 25 abr 2011
Línea 1:		Línea 1:
		+	{{Normalizar}}
	'''Tokens'''. También llamado '''componente léxico''' es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>		'''Tokens'''. También llamado '''componente léxico''' es una cadena de caracteres que tiene un significado coherente en cierto [[Lenguaje de programación\|lenguaje de programación]]. Ejemplos de tokens, podrían ser palabras clave (if, while, int,...), identificadores, números, signos, o un operador de varios caracteres, (por ejemplo, :=).<br>Son los elementos más básicos sobre los cuales se desarrolla toda traducción de un programa, surgen en la primera fase, llamada análisis léxico, sin embargo se siguen utilizando en las siguientes fases (análisis sintáctico y análisis semántico) antes de perderse en la fase de síntesis.<br>