Foro - Perl en Español

Estimados: Quisiera un poco de ayuda en el trabajo que estoy realizando, el cual consta de filtrar un archivo .txt, con más de 2 millones de datos que cuentan con la siguiente estructura:

(ID1,'TEXTO1','clasificacion1','user1','timestamp1','url1','código1),(ID2,'TEXTO2','clasificacion2','user2','timestamp2','url2','código2), ...

Dichos datos se encuentran almacenados en forma consecutiva separados tan solo por una coma ",", donde en ciertos sectores aparece un punto y coma ";".

De lo anterior, requiero generar un filtro mediante Perl para poder dejar tan solo los siguientes datos: ID, TEXTO, USER, y timestamp.

Por lo tanto, intenté realizarlo con la función split(). El problema es que dicha función me toma las primera 600 líneas y quizás más, formándome bloques de texto y no pudiendo evaluar línea por línea para por hacer el filtrado respectivo.

El código es el siguiente:


Favor si me pudieran orientar para poder generar un filtrado eficiente para poder manipular los datos en forma individual desde una aplicación en Java.

Saludos

Estimados: Muy agradecido por la bienvenida y pronta respuesta. Los registros están en forma consecutiva y no están separados por avances de línea. Para aclarar un poco más el tema los registros son tweets traspasados de una gran BD a un archivo de texto (aprox. 711 MB), y hay sectores donde me encuentro con sentencias SQL entremedio de los registros, lo cual me complica bastante, por ejemplo:

INSERT INTO `datos_2013` VALUES (1024766216,'Que lindo que es saber que la plata que nos saca el gobierno es para mantener a estos negros de mierda y no para educación, 'Sin clasificar','santigomez1')

Lo anterior es en respuesta al código que pegué anteriormente, por lo cual además de filtrar los registros dentro de los paréntesis que no requiero, debo filtrar estas instrucciones que están, en alguno sectores, entre registros.

Voy a probar su código y comento, agradezco su respuesta.

Saludos cordiales.

Estimado: Al querer filtrar desde mi archivo .txt, debo agregar la sentencia open FICHERO,"datos_2013", por ejemplo, para abrir el archivo en modo lectura, ya que en tu código tengo ciertas dudas como por ejemplo de la línea 3 a la 6 que están con "#", ¿esas debo dejarlas habilitadas (sin #) para que lean desde mi archivo de texto y poder filtrar los datos? ¿Será necesario el uso de un gestor de archivo?

De antemano, muchas gracias.

Muchas gracias, me ha funcionado muy bien. Ahora me encuentro trabajando la expresión para que considere paréntesis curvos dentro de lo leído, ya que en algunos casos me leía hasta la mitad ya que había por ejemplo algo así : "(?)" , provocando que le leyera hasta "(?" y todo lo demás quedaba desechado. ¡Saludos y muchas gracias!

Llegué al siguiente código que me filtra paréntesis intermedios pero... no sigue con el siguiente grupo de campos...


¿Algún consejo? Saludos.

Estimado: Lamento la falta de información, aquí complemento mi pregunta:

Los tipos de registros son los siguientes:

ID: Tipo numérico entero, por lo general más grande que 1 000 000 000.

Texto: tipo cadena de caracteres alfanuméricos y con posibilidad de incluir cualquier tipo de carácter que nos proporciona el teclado. Éste es el texto que uno escribe en twitter (largo máximo 140 caracteres). Al ser un tweet re-tweeteado, en este texto aparecerá la cadena "RT", que es MUY importante para mí, ya que la usaré para distinguir los tweets que son respondidos y los que son retweeteados, con el fin de formar árboles de tweets para lograr una búsqueda eficiente. Es aquí donde existen la mayor cantidad de problemas para filtrar los datos, ya que como expliqué puede ir cualquier carácter provocando problemas con las expresión regular como lo son los "(" ")" dentro del texto, con la posibilidad de que sea más de una vez.

Clasificación: Cadena de caracteres que identifica el tipo de tweet, la gran mayoría son "Sin Clasificar".

User: Cadena de caracteres con el nombre del usuario que generó el tweet, puede contener cualquier carácter, al igual que el texto del tweet es altamente indispensable.

TimeStamp: Fecha y hora de ingreso al sistema del tweet, con el formato "aaaa-dd-mm hh:mm:ss".

URL: Dirección donde está alojado el tweet. Pueden aparecer todos los caracteres permitidos en una URL

Número del tema: Entero no superior a 1000, que indica el número del tema al que se refiere el tweet.

Cada tweet se compone de la siguiente forma:
(ID,'Texto','Clasificación','User','TimeStamp','URL',Número del tema)

Solo necesito los registros en AZUL. Para ello también debo filtrar las comillas simples " ' " para tratar cada registro en forma individual en una aplicación en Java. Es en esa aplicación donde ocupo la función Split para separarlos por la ",". Fijaros que ni ID ni número del tema llevan comillas simples.

El caso más fácil o feliz sería:
(1024775407,'No es la apariencia, es la esencia. No es el dinero, es la educación. No es la ropa, es la clase.','Sin clasificar','DarihoA','2013-04-05 04:02:43','https://twitter.com/190033321/status/320023668631666688',339)

El caso más difícil:

(1024775406,')RT @allendexxi: Bien la) aprobación de la acusación de (Beyer) pero no olvidamos ((q)) la Concertación también avaló el lucro en la educación!)','Sin clasificar','Mar_c(i)aVargasS','2013-04-05 04:02:45','https://twitter.com/66868014/status/320023679369113600',339)


Espero haber sido más completo en la información.


Saludos Cordiales.