Página en GitHub del proyecto Kedro

Kedro es la primera herramienta de código abierto desarrollada por una división de la consultora McKinsey. Se creó para ser usada por científicos e ingenieros de datos. Es una librería de código que puede ser usada para crear datos y tuberías, los componentes básicos de un proyecto de aprendizaje automático.

McKinsey & Company es una empresa estadounidense de consultoría de gestión a nivel mundial. Realiza análisis cualitativos y cuantitativos para evaluar las decisiones de gestión en los sectores público y privado. Sus clientes incluyen al 80% de las corporaciones más grandes del mundo.

Primera herramienta de código abierto

La empresa nunca antes había publicado una de las herramientas desarrolladas internamente bajo una licencia de código abierto. De hecho, Kedro nació como software propietario. Sin embargo, cuando la relación con la empresa terminaba, los clientes ya no tenían acceso al programa.

El nombre Kedro deriva de la palabra griega para centro o núcleo. Se eligió porque esta herramienta de código abierto proporciona un código crucial para producir proyectos de análisis avanzados.

Kedro tiene dos ventajas principales:

• Permite a los equipos colaborar más fácilmente estructurando el código analítico de forma uniforme.
• Permite que todos los componentes fluyan sin problemas en todas las etapas de un proyecto.

Esto incluye

• Consolidación de fuentes de datos,
• Limpieza de datos
• Creación de características
• Alimentación de los datos en modelos de aprendizaje automático para análisis explicativos o predictivos.

Kedro también ayuda a entregar código listo para ser utilizado. Esto lo hace realmente útil para los científicos de datos que no suelen ser expertos en creación de software.

¿Por qué es útil Kedro?

Herramientas de código abierto como Kedro permiten reducir en semanas el tiempo necesario para transformar un prototipo en código de producción. Los analistas pueden dedicar menos tiempo al código y más tiempo a resolver los problemas de sus clientes.

Kedro ayuda a los equipos a crear canales de datos modulares, probados, reproducibles en cualquier entorno y versionados, lo que permite a los usuarios acceder a estados de datos anteriores. Ese mismo código puede pasar desde el ordenador portátil de un solo desarrollador a un proyecto de nivel empresarial que utilice el cloud computing. También puede utilizarse con todas las industrias, modelos y fuentes de datos.

McKinsey ya utilizó Kedro en más de 50 proyectos hasta la fecha. Según un ejecutivo, a los clientes les gusta especialmente la visualización de las tuberías. Ellos ven inmediatamente las diferentes etapas de transformación, los tipos de modelos implicados y pueden rastrear los resultados hasta la fuente de datos sin procesar.

McKinsey no es la primera empresa no directamente relacionada con la tecnología que publica herramientas de código abierto. Ya lo habían hecho Uber y Airbnb.

Características e instalación de Kendro

Kedro es una herramienta de desarrollo de flujos de trabajo para la creación de canales de datos robustos, escalables, desplegables, reproducibles y versionados.

¿Cuáles son las principales características de Kedro?

1. Plantilla de proyecto y estándares de codificación

• Una plantilla de proyecto estándar y fácil de usar
• Configuración para credenciales, registro, carga de datos y Jupyter Notebooks / Lab.
• Desarrollo basado en pruebas utilizando pytest
• Integración de Sphinx para producir un código bien documentado

2. Extracción y versionado de datos

• Separación de la capa de computación de la capa de manejo de datos, incluyendo soporte para diferentes formatos de datos y opciones de almacenamiento.
• Versiones para sus conjuntos de datos y modelos de aprendizaje de máquinas

3. Modularidad y abstracción de tuberías

• Soporte para funciones Python puras, nodos, para dividir grandes trozos de código en pequeñas secciones independientes.
• Resolución automática de dependencias entre nodos

4. Extensibilidad de las características

• Un sistema de plugins que inyecta comandos en la interfaz de línea de comandos (CLI) de Kedro: Kedro-Airflow, lo que facilita la creación de prototipos de su canal de datos en Kedro antes de desplegarlo en Airflow, un programador de flujos de trabajo. Kedro-Docker, una herramienta para el embalaje y envío de proyectos Kedro en contenedores
• Kedro puede desplegarse localmente, en las instalaciones y en la nube (AWS, Azure y GCP) o en clústeres (EMR, Azure HDinsight, GCP y Databricks).

Podemos instalar Kedro en nuestra distribución Linux prerefida haciendo:

sudo apt install python3-pip
pip install kedro

Para actualizar:
pip3 install kedro -U

Podemos ver la documentación con:
kedro docs
Encontramos más información en la página del proyecto

El artículo McKinsey presenta Kedro, su primera herramienta de código abierto ha sido originalmente publicado en Linux Adictos.

from Linux Adictos http://bit.ly/2I1pRET
via IFTTT

The Document Foundation anuncio la disponibilidad de la beta publica de su próximo lanzamiento LibreOffice 6.3 para todas las plataformas con soporte.

La tercera actualización mayor de la serie LibreOffice 6, LibreOffice 6.3, llegará este verano con una nueva capa de mejoras de rendimiento, además de nuevas características. El desarrollo para LibreOffice 6.3 empezó el pasado noviembre y la versión beta ya está disponible para pruebas públicas.

“LibreOffice 6.3 será lanzado como versión final a mitad de agosto de 2019, siendo LibreOffice 6.3 Beta 1 el segundo pre-lanzamiento desde que inicio el desarrollo a mitad de noviembre de 2018, desde LibreOffice 6.3 Alfa 1, 683 cambios han sido enviados al repositorio y 141 errores han sido arreglados.” Se menciona en el anuncio.

LibreOffice 6.3 ya no tendrá soporte para 32 bits

Además de las mejoras y novedades, LibreOffice 6.3 viene con un cambio importante para todos los usuarios, se ha removido el soporte para distribuciones GNU/Linux de 32 bits, por lo que solo existirá descarga de 64 bits.

Aunque The Document Foundation aclaro que el soporte para 32 bits no se eliminará, si tienes LibreOffice instalado en tu distribución de 32 bits, todavía recibirás actualizaciones para esa versión, pero no podrás tener LibreOffice 6.3, que llegará en agosto de 2019.

Hasta ahora, el ciclo de desarrollo de LibreOffice 6.3 continuará con un segundo lanzamiento beta al final de junio, después tres candidatos a final (RC) en julio. LibreOffice 6.3 tendrá seis actualizaciones de mantenimiento hasta llegar al final de su vida el 29 de mayo de 2020.

El artículo LibreOffice 6.3 entra en fase beta, sin soporte para 32 bits ha sido originalmente publicado en Linux Adictos.

from Linux Adictos http://bit.ly/2IDj17Z
via IFTTT