1# modules/charka/ — Transpilador COBOL → Rust
2
3**Propósito.** Modernizar sistemas COBOL legados transpilándolos a Rust
4con un runtime determinista y un validador en sombra (shadow validator)
5que compara la salida del original y la del transpilado. Es el módulo
6más grande del ecosistema — el parser COBOL completo (CICS, SQL
7embebido, dialectos IBM Enterprise) es un esfuerzo multi-mes.
8
9## Crates
10
11| crate | tipo | rol |
12| -------------- | ---- | ------------------------------------------------------------ |
13| `charka-bcd` | lib | Aritmética decimal de punto fijo con semántica COBOL: `Picture`, `Decimal`, redondeo, `ON SIZE ERROR` |
14| `charka-lexer` | lib | Tokenizador COBOL: formato fijo (tarjeta de 80 columnas) y libre |
15| `charka-parser` | lib | Parser COBOL'85 (subconjunto): tokens → AST (`Program`) |
16| `charka-ir` | lib | Representación intermedia: el AST con los statements del PROCEDURE ya tipados |
17| `charka-runtime` | lib | Soporte de ejecución de los programas transpilados: campos `Num` y `Text` |
18| `charka-codegen` | lib | Emisión de Rust: IR → fuente Rust sobre `charka-runtime` |
19| `charka-shadow` | lib | Validador en sombra: intérprete del IR + corpus de prueba |
20
21## charka-bcd
22
23COBOL no calcula en binario flotante: opera sobre campos decimales de
24precisión fija (`PIC S9(5)V99`). Reproducir un programa COBOL exige
25reproducir esa aritmética dígito a dígito.
26
27- `Picture` — parsea la cláusula PICTURE numérica (`9`, `V`, `S`, `9(n)`).
28- `Decimal` — punto fijo exacto (`mantissa: i128` + `scale`); suma, resta
29 y producto exactos; división con escala de resultado fija; redondeo
30 `Truncate`/`HalfUp`; `coerce` a un `Picture` con detección de
31 desbordamiento.
32- Determinista, sin dependencias de plataforma — mismo programa, mismos
33 dígitos, en cualquier máquina.
34
35## charka-lexer
36
37Primera etapa del pipeline: texto COBOL → secuencia de `Token`.
38
39- **Lexer tonto**: no conoce keywords ni la cláusula `PICTURE` — emite
40 `Word` para todo identificador; la clasificación es del parser.
41- Tokens: `Word` (con guiones internos, `WORKING-STORAGE`), `Number`
42 (sin signo), `String` (comillas dobladas colapsadas), `Period`,
43 `Symbol` (`( ) , ; :` y operadores `+ - * / ** = < > <= >= <>`).
44- Dos formatos: **fijo** (cols 1-6 secuencia, 7 indicadora, 8-72
45 código, 73-80 id) y **libre**. Comentarios por col 7 (`*`/`/`) o `*`
46 inicial en formato libre.
47- Cada token lleva línea/columna 1-based. `LexError` tipado.
48- Limitación v1: sin continuación de literales entre líneas
49 (indicador `-`).
50
51## charka-parser
52
53Segunda etapa: tokens → AST. Alcance v1 — el **esqueleto del programa**.
54
55- `parse(&[Token]) -> Result<Program, ParseError>`.
56- `Program { program_id, data: Vec<DataItem>, paragraphs: Vec<Paragraph> }`.
57- **DATA division** → árbol de `DataItem` (`level`, `name`, `picture`,
58 `value`, `children`). Reensambla la cláusula `PICTURE` desde sus
59 tokens (`S9` `(` `5` `)` `V99` → `S9(5)V99`); anida por número de
60 nivel (01 y 77 son raíces; 88 cuelga del ítem precedente).
61- **PROCEDURE division** → `Vec<Paragraph>`, cada `Paragraph` con sus
62 `Sentence` (tokens crudos — sin parseo a nivel de statement). Las
63 sentencias previas al primer encabezado van a un párrafo implícito
64 de nombre "".
65- Tolerante: salta encabezados de `SECTION`, entradas `FD`/`SD` y
66 cláusulas de datos que no sean `PICTURE`/`VALUE`. `ParseError` sólo
67 ante nivel inválido o dato sin nombre.
68- Limitación v1: no parsea statements, ni la ENVIRONMENT division, ni
69 CICS / SQL embebido / dialectos IBM.
70
71## charka-ir
72
73Tercera etapa: `Program` → `Ir`. Aquí se parsea cada `Sentence` cruda
74(tokens) a statements tipados — el PROCEDURE division pasa de tokens a
75árbol de instrucciones.
76
77- `lower(&Program) -> Ir` — **total y tolerante**, nunca falla.
78- `Ir { program_id, data: Vec<DataItem>, procedures: Vec<Procedure> }`.
79 El modelo de datos pasa tal cual (sirve de tabla de símbolos).
80- `Procedure { name, body: Vec<Stmt> }`. `Stmt` cubre `Move`,
81 `Display`, `Accept`, `Compute`, `Add`/`Subtract`/`Multiply`/`Divide`,
82 `If`, `Perform`, `GoTo`, `StopRun`, `Goback`, `Exit`, `Continue`.
83- `Expr` — expresiones aritméticas con precedencia y paréntesis (Pratt:
84 `+ -` < `* /` < `**` der.). `Cond` — comparaciones (símbolo o forma
85 palabra) unidas por `AND`/`OR`/`NOT`, más nombres de condición (88).
86- Un verbo no soportado se conserva como `Stmt::Unknown { verb,
87 tokens }` — el lowering jamás aborta.
88- COBOL no separa statements con un símbolo: cada uno corta donde
89 empieza el verbo del siguiente. El parser usa palabras "frontera"
90 (verbos + terminadores `END-*`/`ELSE` + conectores `TO`/`GIVING`...)
91 para delimitar listas de operandos.
92- Fuera de alcance v1: `EVALUATE`, `STRING`/`UNSTRING`, E/S de
93 ficheros, `PERFORM VARYING`, CICS, SQL embebido.
94
95## charka-runtime
96
97El soporte de ejecución: lo que `charka-codegen` emite es Rust que
98enlaza contra este crate. Da a un programa transpilado la semántica de
99COBOL en tiempo de ejecución.
100
101- `Num` — campo numérico (`PIC 9(5)V99`): un `Decimal` conformado a su
102 `Picture`. `store`/`store_rounded` truncan o redondean a la escala
103 declarada; al desbordar conservan los dígitos de bajo orden (el
104 `ON SIZE ERROR` sin cláusula). `display` da los dígitos con relleno
105 de ceros.
106- `Text` — campo alfanumérico (`PIC X(20)`) de longitud fija: `store`
107 justifica a la izquierda y rellena/trunca; `fill` mueve figurativas
108 (`SPACES`, `ZEROS`).
109- `cobol_text_cmp` — comparación alfanumérica con relleno de espacios.
110- Reexporta `Decimal`/`Picture`/`Rounding` de `charka-bcd` para que el
111 código generado sólo necesite `use charka_runtime::*;`.
112
113Construido **antes** que `charka-codegen` (la nota de orden del plan
114los listaba al revés): el codegen emite llamadas contra esta API, así
115que el runtime debe existir primero — y es un crate autocontenido,
116verificable sin depender del código emitido.
117
118## charka-codegen
119
120La etapa final: `generate(&Ir) -> String` produce un fuente Rust (un
121`main.rs`) que, compilado contra `charka-runtime`, ejecuta la lógica
122del programa COBOL.
123
124- Un `struct Program` con un campo por cada dato elemental (`Num` /
125 `Text`); `Program::new()` lo inicializa desde las cláusulas `VALUE`.
126- Un método `p_<párrafo>(&mut self)` por párrafo; `run()` los encadena
127 en orden (el «caer» de COBOL); `main()` construye y corre.
128- Cada `Stmt` → líneas Rust: `MOVE`→`.store`, `DISPLAY`→`println!`,
129 `COMPUTE`/aritmética → expresiones `Decimal`, `IF`→`if`, `PERFORM`→
130 llamada / `for` / `while`, `STOP RUN`→`process::exit`.
131- **Tolerante**: lo no transpilable (`Stmt::Unknown`, dato sin
132 resolver, `**`) se emite como comentario `// charka:` — el código
133 generado siempre compila.
134- Verificado de punta a punta: un programa COBOL de demostración
135 transpila a Rust que compila contra `charka-runtime` y produce la
136 salida correcta.
137- Fuera de alcance v1: grupos como campo propio, `REDEFINES`,
138 `OCCURS`/tablas, `PERFORM ... THRU` como rango, E/S de ficheros.
139
140## charka-shadow
141
142El validador: certifica que el pipeline preserva la semántica del
143COBOL original. Lo hace con una **ejecución sombra** — un intérprete
144que corre el `Ir` directamente sobre `charka-runtime`, sin compilar.
145
146- `interpret(&Ir) -> Outcome` — ejecuta el IR y captura las líneas de
147 `DISPLAY`. `run_source(&str)` corre el pipeline completo.
148- El intérprete es una segunda ruta de ejecución, independiente del
149 código que emite `charka-codegen`: si la sombra y el transpilado
150 divergieran, eso delataría un bug.
151- Tope de pasos: un bucle que no termina se corta con
152 `Halt::StepLimit` en vez de colgarse.
153- La referencia v1 es el **corpus** (`corpus/`): 7 programas COBOL de
154 complejidad graduada con sus salidas esperadas verificadas a mano.
155 Un modo futuro, con GnuCOBOL, diferenciará contra el compilador real.
156
157## El corpus
158
159`crates/modules/charka/corpus/` — 7 programas COBOL graduados
160(`01-hola` … `07-clasificar`), cada uno con su `.expected`. Ejercita
161el pipeline completo de punta a punta. Ver su `README.md`.
162
163## La CLI
164
165`crates/apps/charka/` — el binario `charka`, que envuelve el pipeline
166en cuatro comandos: `transpile` (emite Rust), `scaffold` (genera un
167crate compilable), `run` (ejecuta vía el intérprete sombra) y `check`
168(ejecuta y diferencia contra una salida esperada). Avisa de los verbos
169no transpilados.
170
171## Estado
172
173Pipeline **completo** — `charka-bcd` (22 tests), `charka-lexer` (17),
174`charka-parser` (15), `charka-ir` (17), `charka-runtime` (17),
175`charka-codegen` (14), `charka-shadow` (11) y la CLI `charka` (4)
176implementados y verdes. COBOL → Rust corre de punta a punta, validado
177contra el corpus. El crate que genera `scaffold` compila y su salida
178coincide con la del intérprete sombra — las dos rutas de ejecución
179concuerdan.
180
181Próximo hito mayor: salir del subconjunto COBOL'85 puro hacia CICS,
182SQL embebido y los dialectos IBM Enterprise; ampliar el codegen
183(grupos, `REDEFINES`, `OCCURS`/tablas, E/S de ficheros).
SDD.md
modules/charka/ — Transpilador COBOL → Rust
Propósito. Modernizar sistemas COBOL legados transpilándolos a Rust
con un runtime determinista y un validador en sombra (shadow validator)
que compara la salida del original y la del transpilado. Es el módulo
más grande del ecosistema — el parser COBOL completo (CICS, SQL
embebido, dialectos IBM Enterprise) es un esfuerzo multi-mes.
Crates
| crate | tipo | rol |
charka-bcd | lib | Aritmética decimal de punto fijo con semántica COBOL: Picture, Decimal, redondeo, ON SIZE ERROR |
charka-lexer | lib | Tokenizador COBOL: formato fijo (tarjeta de 80 columnas) y libre |
charka-parser | lib | Parser COBOL'85 (subconjunto): tokens → AST (Program) |
charka-ir | lib | Representación intermedia: el AST con los statements del PROCEDURE ya tipados |
charka-runtime | lib | Soporte de ejecución de los programas transpilados: campos Num y Text |
charka-codegen | lib | Emisión de Rust: IR → fuente Rust sobre charka-runtime |
charka-shadow | lib | Validador en sombra: intérprete del IR + corpus de prueba |
charka-bcd
COBOL no calcula en binario flotante: opera sobre campos decimales de
precisión fija (PIC S9(5)V99). Reproducir un programa COBOL exige
reproducir esa aritmética dígito a dígito.
Picture — parsea la cláusula PICTURE numérica (9, V, S, 9(n)).
Decimal — punto fijo exacto (mantissa: i128 + scale); suma, resta
y producto exactos; división con escala de resultado fija; redondeo
Truncate/HalfUp; coerce a un Picture con detección de
desbordamiento.
- Determinista, sin dependencias de plataforma — mismo programa, mismos
dígitos, en cualquier máquina.
charka-lexer
Primera etapa del pipeline: texto COBOL → secuencia de Token.
- Lexer tonto: no conoce keywords ni la cláusula
PICTURE — emite
Word para todo identificador; la clasificación es del parser.
- Tokens:
Word (con guiones internos, WORKING-STORAGE), Number
(sin signo), String (comillas dobladas colapsadas), Period,
Symbol (( ) , ; : y operadores + - * / ** = < > <= >= <>).
- Dos formatos: fijo (cols 1-6 secuencia, 7 indicadora, 8-72
código, 73-80 id) y libre. Comentarios por col 7 (
*//) o *
inicial en formato libre.
- Cada token lleva línea/columna 1-based.
LexError tipado.
- Limitación v1: sin continuación de literales entre líneas
(indicador
-).
charka-parser
Segunda etapa: tokens → AST. Alcance v1 — el esqueleto del programa.
parse(&[Token]) -> Result<Program, ParseError>.
Program { program_id, data: Vec<DataItem>, paragraphs: Vec<Paragraph> }.
- DATA division → árbol de
DataItem (level, name, picture,
value, children). Reensambla la cláusula PICTURE desde sus
tokens (S9 ( 5 ) V99 → S9(5)V99); anida por número de
nivel (01 y 77 son raíces; 88 cuelga del ítem precedente).
- PROCEDURE division →
Vec<Paragraph>, cada Paragraph con sus
Sentence (tokens crudos — sin parseo a nivel de statement). Las
sentencias previas al primer encabezado van a un párrafo implícito
de nombre "".
- Tolerante: salta encabezados de
SECTION, entradas FD/SD y
cláusulas de datos que no sean PICTURE/VALUE. ParseError sólo
ante nivel inválido o dato sin nombre.
- Limitación v1: no parsea statements, ni la ENVIRONMENT division, ni
CICS / SQL embebido / dialectos IBM.
charka-ir
Tercera etapa: Program → Ir. Aquí se parsea cada Sentence cruda
(tokens) a statements tipados — el PROCEDURE division pasa de tokens a
árbol de instrucciones.
lower(&Program) -> Ir — total y tolerante, nunca falla.
Ir { program_id, data: Vec<DataItem>, procedures: Vec<Procedure> }.
El modelo de datos pasa tal cual (sirve de tabla de símbolos).
Procedure { name, body: Vec<Stmt> }. Stmt cubre Move,
Display, Accept, Compute, Add/Subtract/Multiply/Divide,
If, Perform, GoTo, StopRun, Goback, Exit, Continue.
Expr — expresiones aritméticas con precedencia y paréntesis (Pratt:
+ - < * / < ** der.). Cond — comparaciones (símbolo o forma
palabra) unidas por AND/OR/NOT, más nombres de condición (88).
- Un verbo no soportado se conserva como
Stmt::Unknown { verb, tokens } — el lowering jamás aborta.
- COBOL no separa statements con un símbolo: cada uno corta donde
empieza el verbo del siguiente. El parser usa palabras "frontera"
(verbos + terminadores
END-*/ELSE + conectores TO/GIVING...)
para delimitar listas de operandos.
- Fuera de alcance v1:
EVALUATE, STRING/UNSTRING, E/S de
ficheros, PERFORM VARYING, CICS, SQL embebido.
charka-runtime
El soporte de ejecución: lo que charka-codegen emite es Rust que
enlaza contra este crate. Da a un programa transpilado la semántica de
COBOL en tiempo de ejecución.
Num — campo numérico (PIC 9(5)V99): un Decimal conformado a su
Picture. store/store_rounded truncan o redondean a la escala
declarada; al desbordar conservan los dígitos de bajo orden (el
ON SIZE ERROR sin cláusula). display da los dígitos con relleno
de ceros.
Text — campo alfanumérico (PIC X(20)) de longitud fija: store
justifica a la izquierda y rellena/trunca; fill mueve figurativas
(SPACES, ZEROS).
cobol_text_cmp — comparación alfanumérica con relleno de espacios.
- Reexporta
Decimal/Picture/Rounding de charka-bcd para que el
código generado sólo necesite use charka_runtime::*;.
Construido antes que charka-codegen (la nota de orden del plan
los listaba al revés): el codegen emite llamadas contra esta API, así
que el runtime debe existir primero — y es un crate autocontenido,
verificable sin depender del código emitido.
charka-codegen
La etapa final: generate(&Ir) -> String produce un fuente Rust (un
main.rs) que, compilado contra charka-runtime, ejecuta la lógica
del programa COBOL.
- Un
struct Program con un campo por cada dato elemental (Num /
Text); Program::new() lo inicializa desde las cláusulas VALUE.
- Un método
p_<párrafo>(&mut self) por párrafo; run() los encadena
en orden (el «caer» de COBOL); main() construye y corre.
- Cada
Stmt → líneas Rust: MOVE→.store, DISPLAY→println!,
COMPUTE/aritmética → expresiones Decimal, IF→if, PERFORM→
llamada / for / while, STOP RUN→process::exit.
- Tolerante: lo no transpilable (
Stmt::Unknown, dato sin
resolver, **) se emite como comentario // charka: — el código
generado siempre compila.
- Verificado de punta a punta: un programa COBOL de demostración
transpila a Rust que compila contra
charka-runtime y produce la
salida correcta.
- Fuera de alcance v1: grupos como campo propio,
REDEFINES,
OCCURS/tablas, PERFORM ... THRU como rango, E/S de ficheros.
charka-shadow
El validador: certifica que el pipeline preserva la semántica del
COBOL original. Lo hace con una ejecución sombra — un intérprete
que corre el Ir directamente sobre charka-runtime, sin compilar.
interpret(&Ir) -> Outcome — ejecuta el IR y captura las líneas de
DISPLAY. run_source(&str) corre el pipeline completo.
- El intérprete es una segunda ruta de ejecución, independiente del
código que emite
charka-codegen: si la sombra y el transpilado
divergieran, eso delataría un bug.
- Tope de pasos: un bucle que no termina se corta con
Halt::StepLimit en vez de colgarse.
- La referencia v1 es el corpus (
corpus/): 7 programas COBOL de
complejidad graduada con sus salidas esperadas verificadas a mano.
Un modo futuro, con GnuCOBOL, diferenciará contra el compilador real.
El corpus
crates/modules/charka/corpus/ — 7 programas COBOL graduados
(01-hola … 07-clasificar), cada uno con su .expected. Ejercita
el pipeline completo de punta a punta. Ver su README.md.
La CLI
crates/apps/charka/ — el binario charka, que envuelve el pipeline
en cuatro comandos: transpile (emite Rust), scaffold (genera un
crate compilable), run (ejecuta vía el intérprete sombra) y check
(ejecuta y diferencia contra una salida esperada). Avisa de los verbos
no transpilados.
Estado
Pipeline completo — charka-bcd (22 tests), charka-lexer (17),
charka-parser (15), charka-ir (17), charka-runtime (17),
charka-codegen (14), charka-shadow (11) y la CLI charka (4)
implementados y verdes. COBOL → Rust corre de punta a punta, validado
contra el corpus. El crate que genera scaffold compila y su salida
coincide con la del intérprete sombra — las dos rutas de ejecución
concuerdan.
Próximo hito mayor: salir del subconjunto COBOL'85 puro hacia CICS,
SQL embebido y los dialectos IBM Enterprise; ampliar el codegen
(grupos, REDEFINES, OCCURS/tablas, E/S de ficheros).