Teoria

El Reconocimiento óptico de Caracteres (OCR) es una tecnología utilizada para convertir diferentes tipos de documentos, como imágenes, documentos impresos escaneados, fotografías de texto, archivos PDF o imágenes capturadas con una cámara, en datos editables y buscables.

La Minería de Datos (TM) es el proceso de extraer información útil, patrones o conocimiento de texts no estructurados.

Consta de 3 etapas:

  1. Obtener datos: El Reconocimiento Óptico de Caracteres (OCR) es una tecnología que permite convertir imágenes de texto en texto editable. También es conocido como extracción de texto de imágenes.

  2. Explorar datos: Representación gráfica o visualcomunes son el Ánalisis de Sentimientos, la Nube de los datos para su interpretación. Los métodos más de Palabaras y el Topic Modeling.

  3. Análisis predictivo: Son las técnicas y modelos estadísticos para predecir resultados futuros. Los usados son el Random Forest, redes neuronales y regresiones.

Instalar paquetes y librerias

#install.packages("tidyverse") # Manipulacion de datos
library(tidyverse)
## ── Attaching core tidyverse packages ──────────────────────── tidyverse 2.0.0 ──
## ✔ dplyr     1.1.4     ✔ readr     2.1.5
## ✔ forcats   1.0.0     ✔ stringr   1.5.1
## ✔ ggplot2   3.5.2     ✔ tibble    3.3.0
## ✔ lubridate 1.9.4     ✔ tidyr     1.3.1
## ✔ purrr     1.1.0     
## ── Conflicts ────────────────────────────────────────── tidyverse_conflicts() ──
## ✖ dplyr::filter() masks stats::filter()
## ✖ dplyr::lag()    masks stats::lag()
## ℹ Use the conflicted package (<http://conflicted.r-lib.org/>) to force all conflicts to become errors
#install.packages("tesseract") # OCR
library(tesseract)
#install.packages("magick") # PNG
library(magick)
## Linking to ImageMagick 6.9.12.98
## Enabled features: cairo, freetype, fftw, ghostscript, heic, lcms, pango, raw, rsvg, webp
## Disabled features: fontconfig, x11
#install.packages("officer") # Office (word)
library(officer)
#install.packages("pdftools") # PDF
library(pdftools)
## Using poppler version 25.05.0
#install.packages("purrr") # Para la funcion "map" para aplicar una funcion a cada elemento de un vector
library(purrr)
#install.packages("syuzhet") # Analisis de Sentimientos
library(syuzhet)
#install.packages("tm") # mineria de texto
library(tm)
## Loading required package: NLP
## 
## Attaching package: 'NLP'
## 
## The following object is masked from 'package:ggplot2':
## 
##     annotate
#install.packages("wordcloud") # Nube de palabras
library(wordcloud)
## Loading required package: RColorBrewer
#install.packages("RColorBrewer") # Para colores
library(RColorBrewer)

De imagen PNG a texto en Word

imagen1 <- image_read("C:\\Concentracion LIT\\Modulo2\\imagen1.PNG")
texto1 <- ocr(imagen1)
texto1
## [1] "Linear regression with one variable x is also known as univariate linear regression\nor simple linear regression. Simple linear regression is used to predict a single\noutput from a single input. This is an example of supervised learning, which means\nthat the data is labeled, i.e., the output values are known in the training data. Let us\nfit a line through the data using simple linear regression as shown in Fig. 4.1.\n"
doc1 <- read_docx() 
doc1 <- doc1 %>% body_add_par(texto1) # Pega el texto en el documento
#print(doc1, target="texto1.docx") # Guarda el documento en la computadora

De imagen PNG en Espanol a texto en word

imagen2 <- image_read("C:\\Concentracion LIT\\Modulo2\\imagen2.PNG")
tesseract_download("spa")
## Training data already exists. Overwriting C:\Users\adria\AppData\Local\tesseract5\tesseract5\tessdata/spa.traineddata
## [1] "C:\\Users\\adria\\AppData\\Local\\tesseract5\\tesseract5\\tessdata/spa.traineddata"
texto2 <- ocr(imagen2, engine = tesseract("spa"))
texto2
## [1] "Un importante, y quizá controversial, asunto político es el que se refiere al efecto del salario mínimo sobre\nlas tasas de desempleo en diversos grupos de trabajadores. Aunque este problema puede ser estudiado con\ndiversos tipos de datos (corte transversal, series de tiempo o datos de panel), suelen usarse las series de\ntiempo para observar los efectos agregados. En la tabla 1.3 se presenta un ejemplo de una base de datos\nde series de tiempo sobre tasas de desempleo y salarios mínimos.\n"
doc2 <- read_docx() 
doc2 <- doc2 %>% body_add_par(texto2)
#print(doc2, target="texto2.docx")

De PDF a texto en word

pdf_eso <- pdf_convert("C:\\Concentracion LIT\\Modulo2\\eso.pdf") %>% map(ocr) # Repetir pasos previos para convertir imagenes a texto en word
## Converting page 1 to eso_1.png... done!
## Converting page 2 to eso_2.png... done!

Analisis de emociones

texto <- pdf_eso
texto_palabras <- get_tokens(texto)
emociones <- get_nrc_sentiment(texto_palabras, language = "spanish")
barplot(colSums(prop.table(emociones[,1:8])))

sentimientos <- (emociones$negative*-1)+emociones$positive
simple_plot(sentimientos)

Nube de Palabras

palabras <- texto_palabras
palabras <- removeWords(palabras, c(stopwords("spanish"), "habia", "hacia", "casi"))
wordcloud(words=palabras, min.freq = 2, rot.per = 0, random.order = FALSE)
## Warning in tm_map.SimpleCorpus(corpus, tm::removePunctuation): transformation
## drops documents
## Warning in tm_map.SimpleCorpus(corpus, function(x) tm::removeWords(x,
## tm::stopwords())): transformation drops documents

LS0tDQp0aXRsZTogIk9DUiINCmF1dGhvcjogIkFkcmlhbiBNb3JhbGVzIEEwMTcyMjUzMiINCmRhdGU6ICIyMDI1LTA4LTIwIg0Kb3V0cHV0OiANCiAgaHRtbF9kb2N1bWVudDoNCiAgICB0b2M6IFRydWUNCiAgICB0b2NfZmxvYXQ6IFRydWUNCiAgICBjb2RlX2Rvd25sb2FkOiB0cnVlDQogICAgdGhlbWU6IGRhcmtseQ0KLS0tDQoNCiFbXShodHRwczovL2kucGluaW1nLmNvbS9vcmlnaW5hbHMvYWQvMWUvMjIvYWQxZTIyMzk4ODEwNzEyZWMyMDUyMzgwZDdlMWMyMzMuZ2lmKQ0KDQojIDxzcGFuIHN0eWxlPSJjb2xvcjpyZWQ7Ij4gVGVvcmlhIDwvc3Bhbj4NCkVsICoqUmVjb25vY2ltaWVudG8gw7NwdGljbyBkZSBDYXJhY3RlcmVzIChPQ1IpKiogZXMgdW5hIHRlY25vbG9nw61hIHV0aWxpemFkYSBwYXJhIGNvbnZlcnRpciBkaWZlcmVudGVzIHRpcG9zIGRlIGRvY3VtZW50b3MsIGNvbW8gaW3DoWdlbmVzLCBkb2N1bWVudG9zIGltcHJlc29zIGVzY2FuZWFkb3MsIGZvdG9ncmFmw61hcyBkZSB0ZXh0bywgYXJjaGl2b3MgUERGIG8gaW3DoWdlbmVzIGNhcHR1cmFkYXMgY29uIHVuYSBjw6FtYXJhLCBlbiBkYXRvcyBlZGl0YWJsZXMgeSBidXNjYWJsZXMuDQoNCkxhICoqTWluZXLDrWEgZGUgRGF0b3MgKFRNKSoqIGVzIGVsIHByb2Nlc28gZGUgZXh0cmFlciBpbmZvcm1hY2nDs24gw7p0aWwsIHBhdHJvbmVzIG8gY29ub2NpbWllbnRvIGRlIHRleHRzIG5vIGVzdHJ1Y3R1cmFkb3MuDQoNCkNvbnN0YSBkZSAzIGV0YXBhczoNCg0KMS4gT2J0ZW5lciBkYXRvczogRWwgUmVjb25vY2ltaWVudG8gw5NwdGljbyBkZSBDYXJhY3RlcmVzIChPQ1IpIGVzIHVuYSB0ZWNub2xvZ8OtYSBxdWUgcGVybWl0ZSBjb252ZXJ0aXIgaW3DoWdlbmVzIGRlIHRleHRvIGVuIHRleHRvIGVkaXRhYmxlLg0KVGFtYmnDqW4gZXMgY29ub2NpZG8gY29tbyBleHRyYWNjacOzbiBkZSB0ZXh0byBkZSBpbcOhZ2VuZXMuDQoNCjIuIEV4cGxvcmFyIGRhdG9zOiBSZXByZXNlbnRhY2nDs24gZ3LDoWZpY2EgbyB2aXN1YWxjb211bmVzIHNvbiBlbCDDgW5hbGlzaXMgZGUgU2VudGltaWVudG9zLCBsYSBOdWJlIGRlIGxvcyBkYXRvcyBwYXJhIHN1IGludGVycHJldGFjacOzbi4gTG9zIG3DqXRvZG9zIG3DoXMgZGUgUGFsYWJhcmFzIHkgZWwgVG9waWMgTW9kZWxpbmcuDQoNCjMuIEFuw6FsaXNpcyBwcmVkaWN0aXZvOiBTb24gbGFzIHTDqWNuaWNhcyB5IG1vZGVsb3MgZXN0YWTDrXN0aWNvcyBwYXJhIHByZWRlY2lyIHJlc3VsdGFkb3MgZnV0dXJvcy4gTG9zIHVzYWRvcyBzb24gZWwgUmFuZG9tIEZvcmVzdCwgcmVkZXMgbmV1cm9uYWxlcyB5IHJlZ3Jlc2lvbmVzLg0KDQojIDxzcGFuIHN0eWxlPSJjb2xvcjpyZWQ7Ij4gSW5zdGFsYXIgcGFxdWV0ZXMgeSBsaWJyZXJpYXMgPC9zcGFuPg0KYGBge3J9DQojaW5zdGFsbC5wYWNrYWdlcygidGlkeXZlcnNlIikgIyBNYW5pcHVsYWNpb24gZGUgZGF0b3MNCmxpYnJhcnkodGlkeXZlcnNlKQ0KI2luc3RhbGwucGFja2FnZXMoInRlc3NlcmFjdCIpICMgT0NSDQpsaWJyYXJ5KHRlc3NlcmFjdCkNCiNpbnN0YWxsLnBhY2thZ2VzKCJtYWdpY2siKSAjIFBORw0KbGlicmFyeShtYWdpY2spDQojaW5zdGFsbC5wYWNrYWdlcygib2ZmaWNlciIpICMgT2ZmaWNlICh3b3JkKQ0KbGlicmFyeShvZmZpY2VyKQ0KI2luc3RhbGwucGFja2FnZXMoInBkZnRvb2xzIikgIyBQREYNCmxpYnJhcnkocGRmdG9vbHMpDQojaW5zdGFsbC5wYWNrYWdlcygicHVycnIiKSAjIFBhcmEgbGEgZnVuY2lvbiAibWFwIiBwYXJhIGFwbGljYXIgdW5hIGZ1bmNpb24gYSBjYWRhIGVsZW1lbnRvIGRlIHVuIHZlY3Rvcg0KbGlicmFyeShwdXJycikNCiNpbnN0YWxsLnBhY2thZ2VzKCJzeXV6aGV0IikgIyBBbmFsaXNpcyBkZSBTZW50aW1pZW50b3MNCmxpYnJhcnkoc3l1emhldCkNCiNpbnN0YWxsLnBhY2thZ2VzKCJ0bSIpICMgbWluZXJpYSBkZSB0ZXh0bw0KbGlicmFyeSh0bSkNCiNpbnN0YWxsLnBhY2thZ2VzKCJ3b3JkY2xvdWQiKSAjIE51YmUgZGUgcGFsYWJyYXMNCmxpYnJhcnkod29yZGNsb3VkKQ0KI2luc3RhbGwucGFja2FnZXMoIlJDb2xvckJyZXdlciIpICMgUGFyYSBjb2xvcmVzDQpsaWJyYXJ5KFJDb2xvckJyZXdlcikNCmBgYA0KDQojIDxzcGFuIHN0eWxlPSJjb2xvcjpyZWQ7Ij4gRGUgaW1hZ2VuIFBORyBhIHRleHRvIGVuIFdvcmQgPC9zcGFuPg0KYGBge3J9DQppbWFnZW4xIDwtIGltYWdlX3JlYWQoIkM6XFxDb25jZW50cmFjaW9uIExJVFxcTW9kdWxvMlxcaW1hZ2VuMS5QTkciKQ0KdGV4dG8xIDwtIG9jcihpbWFnZW4xKQ0KdGV4dG8xDQpkb2MxIDwtIHJlYWRfZG9jeCgpIA0KZG9jMSA8LSBkb2MxICU+JSBib2R5X2FkZF9wYXIodGV4dG8xKSAjIFBlZ2EgZWwgdGV4dG8gZW4gZWwgZG9jdW1lbnRvDQojcHJpbnQoZG9jMSwgdGFyZ2V0PSJ0ZXh0bzEuZG9jeCIpICMgR3VhcmRhIGVsIGRvY3VtZW50byBlbiBsYSBjb21wdXRhZG9yYQ0KYGBgDQoNCiMgPHNwYW4gc3R5bGU9ImNvbG9yOnJlZDsiPiBEZSBpbWFnZW4gUE5HIGVuIEVzcGFub2wgYSB0ZXh0byBlbiB3b3JkIDwvc3Bhbj4NCmBgYHtyfQ0KaW1hZ2VuMiA8LSBpbWFnZV9yZWFkKCJDOlxcQ29uY2VudHJhY2lvbiBMSVRcXE1vZHVsbzJcXGltYWdlbjIuUE5HIikNCnRlc3NlcmFjdF9kb3dubG9hZCgic3BhIikNCnRleHRvMiA8LSBvY3IoaW1hZ2VuMiwgZW5naW5lID0gdGVzc2VyYWN0KCJzcGEiKSkNCnRleHRvMg0KZG9jMiA8LSByZWFkX2RvY3goKSANCmRvYzIgPC0gZG9jMiAlPiUgYm9keV9hZGRfcGFyKHRleHRvMikNCiNwcmludChkb2MyLCB0YXJnZXQ9InRleHRvMi5kb2N4IikNCmBgYA0KDQojIDxzcGFuIHN0eWxlPSJjb2xvcjpyZWQ7Ij4gRGUgUERGIGEgdGV4dG8gZW4gd29yZCA8L3NwYW4+DQpgYGB7cn0NCnBkZl9lc28gPC0gcGRmX2NvbnZlcnQoIkM6XFxDb25jZW50cmFjaW9uIExJVFxcTW9kdWxvMlxcZXNvLnBkZiIpICU+JSBtYXAob2NyKSAjIFJlcGV0aXIgcGFzb3MgcHJldmlvcyBwYXJhIGNvbnZlcnRpciBpbWFnZW5lcyBhIHRleHRvIGVuIHdvcmQNCmBgYA0KDQojIDxzcGFuIHN0eWxlPSJjb2xvcjpyZWQ7Ij4gQW5hbGlzaXMgZGUgZW1vY2lvbmVzIDwvc3Bhbj4NCmBgYHtyfQ0KdGV4dG8gPC0gcGRmX2Vzbw0KdGV4dG9fcGFsYWJyYXMgPC0gZ2V0X3Rva2Vucyh0ZXh0bykNCmVtb2Npb25lcyA8LSBnZXRfbnJjX3NlbnRpbWVudCh0ZXh0b19wYWxhYnJhcywgbGFuZ3VhZ2UgPSAic3BhbmlzaCIpDQpiYXJwbG90KGNvbFN1bXMocHJvcC50YWJsZShlbW9jaW9uZXNbLDE6OF0pKSkNCnNlbnRpbWllbnRvcyA8LSAoZW1vY2lvbmVzJG5lZ2F0aXZlKi0xKStlbW9jaW9uZXMkcG9zaXRpdmUNCnNpbXBsZV9wbG90KHNlbnRpbWllbnRvcykNCmBgYA0KDQojIDxzcGFuIHN0eWxlPSJjb2xvcjpyZWQ7Ij4gTnViZSBkZSBQYWxhYnJhcyA8L3NwYW4+DQpgYGB7cn0NCnBhbGFicmFzIDwtIHRleHRvX3BhbGFicmFzDQpwYWxhYnJhcyA8LSByZW1vdmVXb3JkcyhwYWxhYnJhcywgYyhzdG9wd29yZHMoInNwYW5pc2giKSwgImhhYmlhIiwgImhhY2lhIiwgImNhc2kiKSkNCndvcmRjbG91ZCh3b3Jkcz1wYWxhYnJhcywgbWluLmZyZXEgPSAyLCByb3QucGVyID0gMCwgcmFuZG9tLm9yZGVyID0gRkFMU0UpDQpgYGANCg0K