Discussion:
[R-es] Streaming data en R
Jesús Para Fernández
2018-01-23 10:00:29 UTC
Permalink
Buenas,

¿Como puedo hacer data streaming con R? He visot que esta el paquete stream, que es para clusterizacion, pero solo me interesa ingestar el dato, para luego aplicar modelos que nada tiene que ver con la clusterizacion...

Gracias
Jesús

[[alternative HTML version deleted]]
Javier Marcuzzi
2018-01-23 13:35:54 UTC
Permalink
Estimado Jesús Para Fernández

Me llamó la atención su consulta y realicé una búsqueda para ver si yo
había entendido bien. Creo que yo entendí lo que usted busca y hay un
ejemplo, para no perder tiempo lea las últimas líneas de la siguiente
página https://github.com/pablobarbera/streamR (el inicio está
incomprensible).

Javier Rubén Marcuzzi

El 23 de enero de 2018, 7:00, Jesús Para Fernández <
***@hotmail.com> escribió:

> Buenas,
>
> ¿Como puedo hacer data streaming con R? He visot que esta el paquete
> stream, que es para clusterizacion, pero solo me interesa ingestar el dato,
> para luego aplicar modelos que nada tiene que ver con la clusterizacion...
>
> Gracias
> Jesús
>
> [[alternative HTML version deleted]]
>
>
> _______________________________________________
> R-help-es mailing list
> R-help-***@r-project.org
> https://stat.ethz.ch/mailman/listinfo/r-help-es
>

[[alternative HTML version deleted]]
Jesús Para Fernández
2018-01-23 14:04:25 UTC
Permalink
Gracias, pero eso hace streaming de twitter

Lo que quiero es lo siguiente:

Tengo un aparato que genera cada 4minutos una medicion y lo guarda en csv. Entonces queiro que ese dato lo vaya leyendo R de manera automatica.

He visto la libreria cronR, pero me gustaria saber si hay algo mas...

Gracias
Jesús
________________________________
De: Javier Marcuzzi <***@gmail.com>
Enviado: martes, 23 de enero de 2018 14:35
Para: Jesús Para Fernández
Cc: r-help-***@r-project.org
Asunto: Re: [R-es] Streaming data en R

Estimado Jesús Para Fernández

Me llamó la atención su consulta y realicé una búsqueda para ver si yo había entendido bien. Creo que yo entendí lo que usted busca y hay un ejemplo, para no perder tiempo lea las últimas líneas de la siguiente página https://github.com/pablobarbera/streamR<https://eur01.safelinks.protection.outlook.com/?url=https%3A%2F%2Fgithub.com%2Fpablobarbera%2FstreamR&data=02%7C01%7C%7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaaaaaa%7C1%7C0%7C636523113564418972&sdata=7gi5K%2Fc7AiOIU5PIMftnjPSXBJGb5usYUYLl0kwg650%3D&reserved=0> (el inicio está incomprensible).

Javier Rubén Marcuzzi

El 23 de enero de 2018, 7:00, Jesús Para Fernández <***@hotmail.com<mailto:***@hotmail.com>> escribió:
Buenas,

¿Como puedo hacer data streaming con R? He visot que esta el paquete stream, que es para clusterizacion, pero solo me interesa ingestar el dato, para luego aplicar modelos que nada tiene que ver con la clusterizacion...

Gracias
Jesús

[[alternative HTML version deleted]]


_______________________________________________
R-help-es mailing list
R-help-***@r-project.org<mailto:R-help-***@r-project.org>
https://stat.ethz.ch/mailman/listinfo/r-help-es<https://eur01.safelinks.protection.outlook.com/?url=https%3A%2F%2Fstat.ethz.ch%2Fmailman%2Flistinfo%2Fr-help-es&data=02%7C01%7C%7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaaaaaa%7C1%7C0%7C636523113564418972&sdata=JC2yw4rGDsJ2s%2FBjhOcK2l6IHM1i1Rp%2FOikup8wKLps%3D&reserved=0>


[[alternative HTML version deleted]]
Javier Marcuzzi
2018-01-23 14:26:11 UTC
Permalink
Estimado Jesús Para Fernández

Entonces posiblemente no es streaming, el planteo puede ser más simple con
rvest, curl, o alguna otra forma. El aparato que genera los datos los
guarda cada 4 minutos en un lugar de la web, por ejemplo los archivos se
llaman medición_1.csv, medición_2.csv, medición_3.csv, y usted lee solo el
que de falta, por ejemplo el medición_3.csv. Pero hay un inconveniente, R
no está pensado para esto. Entonces lo que puede generar es un script en
algún lenguaje que llame a R cada cierto tiempo y R ejecuta, porque de lo
contrario R siempre tendría que estar funcionando, aunque hay alternativas
como RServer de Microsoft. La librería que usted menciona por lo que dice
en la parte de instalación, correría en Linux, pero independiente del
sistema operativo, todos tienen alguna forma de ordenar que se ejecute un
archivo cada cierto tiempo. Yo por streaming entiendo que los datos llegan
continuamente, la comunicación permanece abierta, pero sus datos se generan
cada cuatro minutos, por lo cuál puede abrir y cerrar la comunicación cada
4 minutos (se genera en el minuto par y se lee en el impar).

Una búsqueda como esta puede darle ideas r script schedule

Javier Ruben Marcuzzi

El 23 de enero de 2018, 11:04, Jesús Para Fernández <
***@hotmail.com> escribió:

> Gracias, pero eso hace streaming de twitter
>
> Lo que quiero es lo siguiente:
>
> Tengo un aparato que genera cada 4minutos una medicion y lo guarda en csv.
> Entonces queiro que ese dato lo vaya leyendo R de manera automatica.
>
> He visto la libreria cronR, pero me gustaria saber si hay algo mas...
>
> Gracias
> Jesús
> ------------------------------
> *De:* Javier Marcuzzi <***@gmail.com>
> *Enviado:* martes, 23 de enero de 2018 14:35
> *Para:* Jesús Para Fernández
> *Cc:* r-help-***@r-project.org
> *Asunto:* Re: [R-es] Streaming data en R
>
> Estimado Jesús Para Fernández
>
> Me llamó la atención su consulta y realicé una búsqueda para ver si yo
> había entendido bien. Creo que yo entendí lo que usted busca y hay un
> ejemplo, para no perder tiempo lea las últimas líneas de la siguiente
> página https://github.com/pablobarbera/streamR
> <https://eur01.safelinks.protection.outlook.com/?url=https%3A%2F%2Fgithub.com%2Fpablobarbera%2FstreamR&data=02%7C01%7C%7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaaaaaa%7C1%7C0%7C636523113564418972&sdata=7gi5K%2Fc7AiOIU5PIMftnjPSXBJGb5usYUYLl0kwg650%3D&reserved=0>
> (el inicio está incomprensible).
>
> Javier Rubén Marcuzzi
>
> El 23 de enero de 2018, 7:00, Jesús Para Fernández <
> ***@hotmail.com> escribió:
>
> Buenas,
>
> ¿Como puedo hacer data streaming con R? He visot que esta el paquete
> stream, que es para clusterizacion, pero solo me interesa ingestar el dato,
> para luego aplicar modelos que nada tiene que ver con la clusterizacion...
>
> Gracias
> Jesús
>
> [[alternative HTML version deleted]]
>
>
> _______________________________________________
> R-help-es mailing list
> R-help-***@r-project.org
> https://stat.ethz.ch/mailman/listinfo/r-help-es
> <https://eur01.safelinks.protection.outlook.com/?url=https%3A%2F%2Fstat.ethz.ch%2Fmailman%2Flistinfo%2Fr-help-es&data=02%7C01%7C%7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaaaaaa%7C1%7C0%7C636523113564418972&sdata=JC2yw4rGDsJ2s%2FBjhOcK2l6IHM1i1Rp%2FOikup8wKLps%3D&reserved=0>
>
>
>

[[alternative HTML version deleted]]
Jesús Para Fernández
2018-01-23 14:39:02 UTC
Permalink
Gracias Javier,

Creo que el problema era ese, saber exactamente lo que queria....

Muchas gracias por el gran aporte!
Jesús
________________________________
De: Javier Marcuzzi <***@gmail.com>
Enviado: martes, 23 de enero de 2018 15:26
Para: Jesús Para Fernández
Cc: r-help-***@r-project.org
Asunto: Re: [R-es] Streaming data en R

Estimado Jesús Para Fernández

Entonces posiblemente no es streaming, el planteo puede ser más simple con rvest, curl, o alguna otra forma. El aparato que genera los datos los guarda cada 4 minutos en un lugar de la web, por ejemplo los archivos se llaman medición_1.csv, medición_2.csv, medición_3.csv, y usted lee solo el que de falta, por ejemplo el medición_3.csv. Pero hay un inconveniente, R no está pensado para esto. Entonces lo que puede generar es un script en algún lenguaje que llame a R cada cierto tiempo y R ejecuta, porque de lo contrario R siempre tendría que estar funcionando, aunque hay alternativas como RServer de Microsoft. La librería que usted menciona por lo que dice en la parte de instalación, correría en Linux, pero independiente del sistema operativo, todos tienen alguna forma de ordenar que se ejecute un archivo cada cierto tiempo. Yo por streaming entiendo que los datos llegan continuamente, la comunicación permanece abierta, pero sus datos se generan cada cuatro minutos, por lo cuál puede abrir y cerrar la comunicación cada 4 minutos (se genera en el minuto par y se lee en el impar).

Una búsqueda como esta puede darle ideas r script schedule

Javier Ruben Marcuzzi

El 23 de enero de 2018, 11:04, Jesús Para Fernández <***@hotmail.com<mailto:***@hotmail.com>> escribió:
Gracias, pero eso hace streaming de twitter

Lo que quiero es lo siguiente:

Tengo un aparato que genera cada 4minutos una medicion y lo guarda en csv. Entonces queiro que ese dato lo vaya leyendo R de manera automatica.

He visto la libreria cronR, pero me gustaria saber si hay algo mas...

Gracias
Jesús
________________________________
De: Javier Marcuzzi <***@gmail.com<mailto:***@gmail.com>>
Enviado: martes, 23 de enero de 2018 14:35
Para: Jesús Para Fernández
Cc: r-help-***@r-project.org<mailto:r-help-***@r-project.org>
Asunto: Re: [R-es] Streaming data en R

Estimado Jesús Para Fernández

Me llamó la atención su consulta y realicé una búsqueda para ver si yo había entendido bien. Creo que yo entendí lo que usted busca y hay un ejemplo, para no perder tiempo lea las últimas líneas de la siguiente página https://github.com/pablobarbera/streamR<https://eur01.safelinks.protection.outlook.com/?url=https%3A%2F%2Fgithub.com%2Fpablobarbera%2FstreamR&data=02%7C01%7C%7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaaaaaa%7C1%7C0%7C636523113564418972&sdata=7gi5K%2Fc7AiOIU5PIMftnjPSXBJGb5usYUYLl0kwg650%3D&reserved=0> (el inicio está incomprensible).

Javier Rubén Marcuzzi

El 23 de enero de 2018, 7:00, Jesús Para Fernández <***@hotmail.com<mailto:***@hotmail.com>> escribió:
Buenas,

¿Como puedo hacer data streaming con R? He visot que esta el paquete stream, que es para clusterizacion, pero solo me interesa ingestar el dato, para luego aplicar modelos que nada tiene que ver con la clusterizacion...

Gracias
Jesús

[[alternative HTML version deleted]]


_______________________________________________
R-help-es mailing list
R-help-***@r-project.org<mailto:R-help-***@r-project.org>
https://stat.ethz.ch/mailman/listinfo/r-help-es<https://eur01.safelinks.protection.outlook.com/?url=https%3A%2F%2Fstat.ethz.ch%2Fmailman%2Flistinfo%2Fr-help-es&data=02%7C01%7C%7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaaaaaa%7C1%7C0%7C636523113564418972&sdata=JC2yw4rGDsJ2s%2FBjhOcK2l6IHM1i1Rp%2FOikup8wKLps%3D&reserved=0>



[[alternative HTML version deleted]]
Carlos Ortega
2018-01-23 14:56:57 UTC
Permalink
Hola,

Bueno, puedes hacértelo tú mismo con un Sys.sleep() dentro de un bucle o
algo así y que vaya ejecutándose una función de lectura de datos y
procesado cada cierto tiempo...

Saludos,
Carlos Ortega.
www.qualityexcellence.es

El 23 de enero de 2018, 15:39, Jesús Para Fernández <
***@hotmail.com> escribió:

> Gracias Javier,
>
> Creo que el problema era ese, saber exactamente lo que queria....
>
> Muchas gracias por el gran aporte!
> Jesús
> ________________________________
> De: Javier Marcuzzi <***@gmail.com>
> Enviado: martes, 23 de enero de 2018 15:26
> Para: Jesús Para Fernández
> Cc: r-help-***@r-project.org
> Asunto: Re: [R-es] Streaming data en R
>
> Estimado Jesús Para Fernández
>
> Entonces posiblemente no es streaming, el planteo puede ser más simple con
> rvest, curl, o alguna otra forma. El aparato que genera los datos los
> guarda cada 4 minutos en un lugar de la web, por ejemplo los archivos se
> llaman medición_1.csv, medición_2.csv, medición_3.csv, y usted lee solo el
> que de falta, por ejemplo el medición_3.csv. Pero hay un inconveniente, R
> no está pensado para esto. Entonces lo que puede generar es un script en
> algún lenguaje que llame a R cada cierto tiempo y R ejecuta, porque de lo
> contrario R siempre tendría que estar funcionando, aunque hay alternativas
> como RServer de Microsoft. La librería que usted menciona por lo que dice
> en la parte de instalación, correría en Linux, pero independiente del
> sistema operativo, todos tienen alguna forma de ordenar que se ejecute un
> archivo cada cierto tiempo. Yo por streaming entiendo que los datos llegan
> continuamente, la comunicación permanece abierta, pero sus datos se generan
> cada cuatro minutos, por lo cuál puede abrir y cerrar la comunicación cada
> 4 minutos (se genera en el minuto par y se lee en el impar).
>
> Una búsqueda como esta puede darle ideas r script schedule
>
> Javier Ruben Marcuzzi
>
> El 23 de enero de 2018, 11:04, Jesús Para Fernández <
> ***@hotmail.com<mailto:***@hotmail.com>>
> escribió:
> Gracias, pero eso hace streaming de twitter
>
> Lo que quiero es lo siguiente:
>
> Tengo un aparato que genera cada 4minutos una medicion y lo guarda en csv.
> Entonces queiro que ese dato lo vaya leyendo R de manera automatica.
>
> He visto la libreria cronR, pero me gustaria saber si hay algo mas...
>
> Gracias
> Jesús
> ________________________________
> De: Javier Marcuzzi <***@gmail.com<mailto:javier.ruben.
> ***@gmail.com>>
> Enviado: martes, 23 de enero de 2018 14:35
> Para: Jesús Para Fernández
> Cc: r-help-***@r-project.org<mailto:r-help-***@r-project.org>
> Asunto: Re: [R-es] Streaming data en R
>
> Estimado Jesús Para Fernández
>
> Me llamó la atención su consulta y realicé una búsqueda para ver si yo
> había entendido bien. Creo que yo entendí lo que usted busca y hay un
> ejemplo, para no perder tiempo lea las últimas líneas de la siguiente
> página https://github.com/pablobarbera/streamR<https://
> eur01.safelinks.protection.outlook.com/?url=https%3A%2F%
> 2Fgithub.com%2Fpablobarbera%2FstreamR&data=02%7C01%7C%
> 7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaa
> aaaa%7C1%7C0%7C636523113564418972&sdata=7gi5K%
> 2Fc7AiOIU5PIMftnjPSXBJGb5usYUYLl0kwg650%3D&reserved=0> (el inicio está
> incomprensible).
>
> Javier Rubén Marcuzzi
>
> El 23 de enero de 2018, 7:00, Jesús Para Fernández <
> ***@hotmail.com<mailto:***@hotmail.com>>
> escribió:
> Buenas,
>
> ¿Como puedo hacer data streaming con R? He visot que esta el paquete
> stream, que es para clusterizacion, pero solo me interesa ingestar el dato,
> para luego aplicar modelos que nada tiene que ver con la clusterizacion...
>
> Gracias
> Jesús
>
> [[alternative HTML version deleted]]
>
>
> _______________________________________________
> R-help-es mailing list
> R-help-***@r-project.org<mailto:R-help-***@r-project.org>
> https://stat.ethz.ch/mailman/listinfo/r-help-es<https://
> eur01.safelinks.protection.outlook.com/?url=https%3A%2F%
> 2Fstat.ethz.ch%2Fmailman%2Flistinfo%2Fr-help-es&data=02%7C01%7C%
> 7C63989919eb32488397b808d562663ae4%7C84df9e7fe9f640afb435aaaaaaaa
> aaaa%7C1%7C0%7C636523113564418972&sdata=JC2yw4rGDsJ2s%2FBjhOcK2l6IHM1i1Rp%
> 2FOikup8wKLps%3D&reserved=0>
>
>
>
> [[alternative HTML version deleted]]
>
>
> _______________________________________________
> R-help-es mailing list
> R-help-***@r-project.org
> https://stat.ethz.ch/mailman/listinfo/r-help-es
>



--
Saludos,
Carlos Ortega
www.qualityexcellence.es

[[alternative HTML version deleted]]
Loading...