Algunas veces manipular datos puede resultar costoso. A menudo los data scientists tenemos que manipular grandes cantidades de datos por lo que es bueno conocer algunos tranquillos para optimizar el proceso. Aquí os dejo unos cuantos comandos con algunas opciones para trabajar más eficientemente. head head archivo.txt Este comando imprime las 10 primeras lineas del […]
Tag Archives: Big Data
Optimizadores de tensor flow
Continuando el anterior post dónde introducí tensor flow hoy vengo con los optimizadores de funciones. Tensor flow ofrece optimizadores que cambian las variables para minimizar la funcion de perdida (loss function). El más simple es el de gradiente descendiente. Computan las derivadas simbólicas (symbolic derivatives) simplemente usando el modelo y la función tf.gradients. Por ejemplo: […]
Las mejores 8 herramientas para visualizar datos
Siguiendo ya un poco con algunos posts de visualización de datos del big data, he escrito otro más. Esta vez quizás conozcáis algunas herramientas pero os puedo asegurar que os sorprenderán algunos de sus usos para mostrar datos. 1 Excel Excel te permite cambiar el color de las casillas según los parámetros anteriormente indicados. De este […]
Posibles problemas del Big Data
No todo es maravilloso en el Big Data, también tiene algunos inconvenientes que es necesario saber para no caer en errores. Correlación: Que algo suceda no quiere decir que tenga una correlación que nos afecte. Por ejemplo que la gente que viene a trabajar los lunes esté más cansada y que los lunes tengamos más […]
Técnicas de análisis de Big Data
Evidentemente cuanta más data tengamos más exhaustivo va a ser nuestro análisis, algunas de estas técnicas pueden ser aplicadas a grupos pequeños, pero todas pueden ser aplicadas al Big Data. Aquí van los grupos: A/B Testing: Esto es una de las técnicas que se puede usar con grupos de data pequeños. Se trata de mostrar […]
Que tecnologías nos ayudan a almacenar el BigData?
Hablando del big data ahora toca hablar un poco de las tecnologías que nos ayudan a hacer esto posible. Es una lista de sistemas específicos, como más generales. Big Table: Inspiración para Hbase, sistema construido para Google File System. Business intelligence (BI): Es un tipo de software que trata los datos y los presenta de […]
Como visualizar el big data
Ya que estamos hablando del tema debemos hablar de la forma de representar los datos. Los seres humanos hemos sido “diseñados” para identificar las cosas que se salgan de lo normal. Y para identificar patrones en un número determinado y finito de datos, por lo tanto todo lo que se salga de este estándar nos […]