Hace pocos dias NVIDIA y Mozilla dieron a conocer la liberación de la nueva versión de «Mozilla Common Voice 7.0» la cual representa más de 13.000 horas de datos de voz de origen colectivo y la adición de otros 16 idiomas y que en comparación con la última actualización, el tamaño del volumen de material de habla en la colección ha aumentado en casi un 50% más.

Además, el número de idiomas admitidos ha aumentado de 60 a 76, incluido por primera vez soporte adicional para los idiomas bielorruso, kazajo, uzbeko, búlgaro, armenio, azerbaiyano y bashkir.

Para quienes desconocen de Common Voice, deben saber que este es un conjunto de datos de voz de datos abiertos más grande del mundo y está diseñado para democratizar la tecnología de voz. Es utilizado por investigadores, académicos y desarrolladores de todo el mundo.

Los colaboradores movilizan sus propias comunidades para donar datos de voz a la base de datos pública de MCV, que cualquiera puede usar para entrenar tecnología habilitada por voz. Como parte de la colaboración de NVIDIA con Mozilla Common Voice, los modelos entrenados en este y otros conjuntos de datos públicos están disponibles de forma gratuita a través de un kit de herramientas de código abierto llamado NVIDIA NeMo.

El proyecto tiene como objetivo organizar el trabajo conjunto para acumular una base de datos de plantillas de voz, teniendo en cuenta toda la variedad de voces y formas de hablar. La base de datos acumulada con registros de diferentes pronunciaciones de frases típicas del habla humana se puede utilizar sin restricciones en sistemas de aprendizaje automático y en proyectos de investigación.

Según el autor de la biblioteca de reconocimiento de voz continuo de Vosk, las deficiencias del conjunto Common Voice son la unilateralidad del material vocal (el predominio de hombres de 20 a 30 años y la falta de material con la voz de las mujeres, niños y ancianos), la falta de variabilidad del vocabulario (repetición de las mismas frases) y la distribución de grabaciones MP3 propensas a la distorsión.

Sobre la nueva versión de Common Voice 7.0

En esta nueva versión participaron más de 75 mil personas en la preparación de materiales en inglés, dictando 2637 horas de discurso confirmado (fueron 66 mil participantes y 1686 horas).

Tambien como ya mencionamos al inicio, esta nueva versión introduce 16 nuevos idiomas al conjunto de datos de Common Voice pasando a un total de 76 idiomas, de los cuales los cinco idiomas principales por horas totales son inglés (2.630 horas), kinyarwanda (2.260), alemán (1.040), catalán (920) y esperanto (840).

Los idiomas que más han aumentado en porcentaje son el tailandés (crecimiento de casi 20 veces, de 12 horas a 250 horas), luganda (crecimiento de 9 veces, de 8 horas a 80 horas), esperanto (crecimiento de más de 7 veces, de 100 horas a 840 horas) y Tamil (crecimiento de más de 8x, de 24 horas a 220 horas). Curiosamente, Ruanda ocupa el segundo lugar en términos de datos acumulados, para los cuales se recopilaron 2260 horas. Le siguen el alemán (1040), el catalán (920) y el esperanto (840). El conjunto de datos ahora presenta más de 182,000 voces únicas, un crecimiento del 25% en la comunidad de contribuyentes en solo seis meses.

Además se menciona que como parte de su participación en el proyecto, NVIDIA ha preparado modelos entrenados listos para usar para sistemas de aprendizaje automático basados ​​en los datos recopilados (compatibles con PyTorch). Los modelos se distribuyen como parte de una herramienta gratuita y abierta NVIDIA NeMo, que, por ejemplo, ya se utiliza en los servicios de voz automatizados de MTS y Sberbank.

Los modelos están dirigidos al reconocimiento de voz, la síntesis de voz y los sistemas de procesamiento de información en lenguaje natural y pueden ser útiles para los investigadores en el diseño de sistemas de diálogo de voz, plataformas de transcripción y centros de llamadas automatizados. A diferencia de los proyectos disponibles anteriormente, los modelos publicados no se limitan al reconocimiento del inglés y cubren una variedad de idiomas, acentos y formas de habla.

Finalmente si estás interesado en poder conocer más al respecto, puedes consultar los detalles en el siguiente enlace.

from Linux Adictos https://ift.tt/2Vduohf
via IFTTT

IBM dio a conocer hace poco a «IBM z/OS V2.5», el cual destaca como un sistema operativo de próxima generación para IBM Z y el cual está diseñado para acelerar la adopción por parte de los clientes de la nube híbrida y la inteligencia artificial (AI) y para impulsar proyectos de modernización de aplicaciones.

Se menciona que esta nueva versión tiene nuevas características que facilitan el uso de IBM z/OS Container Extensions y brindan a los desarrolladores acceso a una selección más amplia de herramientas, marcos y bibliotecas basadas en IA que incluyen aplicaciones de contenedor basadas en Linux que pueden implementar dentro de la plataforma z/OS. Otras nuevas capacidades de IA incluyen soporte para herramientas como TensorFlow e IBM Watson Machine Learning para z/OS.

Con las amenazas inminentes planteadas por los recientes ataques de ransomware, IBM también se centró en fortalecer las capacidades de ciberseguridad al expandir su cifrado generalizado a nuevos tipos de conjuntos de datos, como el formato básico secuencial y los conjuntos de datos gestionados por SMS de gran formato. Esto permite a los usuarios cifrar datos sin la necesidad de realizar cambios en las aplicaciones, así como abordar de manera más sencilla los problemas de cumplimiento.

“IBM se basa en gran medida en la nube híbrida y la inteligencia artificial, y estamos fuertemente enfocados en traer nuevas innovaciones como inteligencia artificial y nuevas capacidades de seguridad en IBM Z para ayudar a nuestros clientes a ir desde antes, más rápidamente, en sus viajes de modernización. Para nuestros clientes, IBM z / OS V2.5 trae nuevas características de seguridad y resistencia a la plataforma, y ​​les permite infundir IA en tiempo real en cada transacción comercial, imperativos que se han vuelto más urgentes durante la pandemia de transición» Comenta, Ross Mauri, gerente general de IBM Z, 

También incluye características para ayudar a los usuarios heredados a modernizar más fácilmente sus entornos de mainframe al permitir una interoperabilidad más estrecha con las herramientas de mainframe y basadas en la nube. La compañía ha agregado nueva interoperabilidad entre Java y Cobol al extender el soporte de los dos entornos de programación para 31 bits y 64 bits en paralelo, lo que hace que los esfuerzos de modernización sean más fáciles de lograr.

Por la parte de la seguridad y para hacer frente a amenazas recientes como el ataque de ransomware de SolarWinds y Colonial Pipeline en la infraestructura crítica, IBM z/OS V2.5 ayuda a abordar estos desafíos al revelar una amplia gama de mejoras en las áreas de autenticación, autorización, registros, integridad del sistema, disponibilidad del sistema y seguridad, datos, cifrado de datos en tránsito y en reposo, y en general privacidad de datos, que incluye:

• Cifrado sistemático extendido a nuevos tipos de conjuntos de datos : ahora se incluyen conjuntos de datos secuenciales de formato básico y conjuntos de datos de gran formato gestionados por SMS, lo que permite a los usuarios cifrar datos sin modificar la aplicación de los datos y simplificar el cumplimiento.
• Capacidades de mitigación de anomalías que aprovechan el análisis predictivo de fallas (PFA), los diagnósticos en tiempo de ejecución, el administrador de carga de trabajo (WLM) y JES2 para ayudar a detectar mejor el comportamiento anormal casi en tiempo real, lo que permite a los clientes resolver proactivamente problemas potenciales.

Mientras que para ofrecer un entorno seguro y escalable para la nube híbrida, OS V2.5 trae nuevas características que respaldan la modernización de aplicaciones y brindan una experiencia nativa de la nube en z/OS tales como nuevas características para integrar el almacenamiento en la nube a través de la organización en niveles de la nube transparente y el soporte para el soporte de la capa en la nube del método de acceso a objetos, lo que ayuda a reducir los gastos operativos con la transferencia de datos a los entornos de almacenamiento en la nube híbrida.

Finalmente, en cuanto a la disponibilidad general de IBM z/OS V2.5 está programada para el 30 de septiembre de 2021. Si quieres conocer más al respecto, puedes consultar los detalles en el siguiente enlace.

from Linux Adictos https://ift.tt/3imBmcf
via IFTTT

Hace pocos dias compartimos aquí en el blog la noticia sobre de que Linus Torvalds le pidió a Paragon Software que enviara el código para fusionar su nuevo controlador NTFS. En ese entonces se tenía pensando que el controlador podría agregarse en Linux 5.14-rc2, lo cual no sucedió, pero si estará siendo integrado en la versión de Linux 5.15

Y es que durante la discusión en la edición número 27 del conjunto de parches, fue recientemente publicada la implementación del sistema de archivos NTFS de Paragon Software y a la cual básicamente Linus Torvalds le dio luz verde para ser implementada dentro de Linux, ya que dijo que «no ve obstáculos para recibir este conjunto de parches en la siguiente ventana para aceptar cambios. A menos que se identifiquen problemas imprevistos, la compatibilidad con NTFS de Paragon Software se incluirá en el kernel 5.15, que se espera que se lance en noviembre.»

Durante el tiempo que queda hasta que los parches sean aceptados en el kernel, Linus recomendó volver a verificar la exactitud de la firma en los parches confirmando la autoría del código transferido y la preparación de su distribución como parte del kernel bajo un código abierto. También se recomendó que Paragon Software una vez más se asegure de que el departamento legal comprenda todas las consecuencias de transferir código bajo la licencia GPLv2 y comprenda la esencia de esta licencia copyleft.

El código para el nuevo controlador NTFS fue publicado por Paragon Software en agosto del año pasado y difiere del que ya está en el kernel del controlador por la capacidad de trabajar en modo de escritura, pues el controlador anterior no se ha actualizado durante muchos años y se encuentra en un estado deplorable.

Planeamos admitir esta versión después de que el código base una vez se haya fusionado y agregar nuevos
características y corregir errores. Por ejemplo, el soporte completo de registro en diario sobre JBD será
agregado en actualizaciones posteriores.

Y es que anteriormente, para tener acceso completo a las particiones NTFS desde Linux, tenía que usar el controlador FUSE NTFS-3g, que se ejecuta en el espacio del usuario y no proporciona el rendimiento deseado. Este controlador no se ha actualizado desde 2017, al igual que el controlador fs/ntfs de solo lectura. Ambos controladores fueron creados por Tuxera, que, al igual que Paragon Software, proporciona un controlador NTFS propietario disponible comercialmente.

En cuanto al nuevo controlador que se piensa implementar en el Kernel, este se destaca por admitir todas las características de la versión actual de NTFS 3.1, incluidos los atributos de archivo extendidos, el modo de compresión de datos, el trabajo eficiente con vacíos en los archivos y la reproducción de cambios del registro para restaurar la integridad después de fallas.

El controlador se basa en la base de código de producto comercial existente de Paragon Software y está bien probado. Los parches están diseñados de acuerdo con los requisitos para preparar código para Linux y no contienen enlaces a API adicionales, lo que permite que el nuevo controlador se incluya en la composición principal del kernel. Una vez que los parches se incluyen en la parte principal del kernel de Linux, Paragon Software tiene la intención de proporcionar mantenimiento, corrección de errores y mejoras de funcionalidad.

En la revisión del parche 27, Paragon Software adaptó el controlador para los cambios en la API iov reemplazando la llamada iov_iter_copy_from_user_atomic() con copy_page_from_iter_atomic() y discontinuando la función iov_iter_advance().

De las recomendaciones hechas en la discusión, solo queda la traducción del código para usar fs/iomap, pero este no es un requisito obligatorio, sino solo una recomendación que se puede implementar después de la inclusión en el kernel. Además, Paragon Software ha confirmado que está listo para acompañar el código propuesto en el kernel y planea mover la implementación del diario para que funcione sobre el JBD (dispositivo de bloque de diario) existente en el kernel, sobre la base del cual el diario en ext3, ext4 y OCFS2 están organizados.

Finalmente, para quienes estén interesados en poder conocer más al respecto, pueden consultar los detalles en el siguiente enlace.

from Linux Adictos https://ift.tt/3AmyUZJ
via IFTTT

Los desarrolladores del proyecto ntop (que desarrollan herramientas para capturar y analizar el tráfico) dieron a conocer hace poco la liberación de la nueva versión de nDPI, la cual es un superconjunto de mantenimiento continuo de la popular biblioteca OpenDP.

nDPI se caracteriza por ser utilizado tanto por ntop como por nProbe para agregar la detección de protocolos en la capa de aplicación, independientemente del puerto que se esté utilizando. Esto significa que es posible detectar protocolos conocidos en puertos no estándar.

El proyecto permite determinar los protocolos de nivel de aplicación utilizados en el tráfico mediante el análisis de la naturaleza de la actividad de la red sin vincularse a los puertos de la red (puede determinar los protocolos conocidos cuyos controladores aceptan conexiones en puertos de red no estándar, por ejemplo, si se envía http no desde el puerto 80, o, por el contrario, cuando intentan camuflar otra actividad de red como http ejecutándose en el puerto 80).

Las diferencias con OpenDPI se reducen a compatibilidad con protocolos adicionales, portabilidad para la plataforma Windows, optimización del rendimiento, adaptación para su uso en aplicaciones para monitorear el tráfico en tiempo real (se han eliminado algunas características específicas que ralentizaban el motor), capacidades de construcción en el formulario de un módulo del kernel de Linux y soporte para definir subprotocolos.

En total, se admiten definiciones de aplicaciones y protocolos 247, de los cuales se destacan los siguientes: FTP_CONTROL, POP3, SMTP, IMAP, DNS, HTTP, NetBIOS, NFS, SNMP, XDMCP, Syslog, DHCP, PostgreSQL, MySQL, Hotmail, Direct_Download_Link, POPS, VMware, SMTPS, FacebookZero, UBNTAC2, OpenFT, Gnutella, eDonkey, BitTorrent, Skype, Signal, Xbox, ShoutCast, IRC, Ayiya, Unencrypted_Jabber, Yahoo, Telnet, VNC, Dropbox, GMail, YouTube, TeamViewer, UPnP, Spotify, OpenVPN, CiscoVPN, Deezer, Instagram, Microsoft, Google Drive, Cloudflare, MS_OneDrive, OpenDNS, Git, Pastebin, LinkedIn, SoundCloud, Amazon Video, Google Docs, Archivos de WhatsApp, Targus Dataspeed, Zabbix, WebSocket, entre otros más.

Principales novedades de nDPI 4.0

En cuanto a las novedades que se presentan en esta nueva versión 4.0 se ha impulsado en términos de velocidad con una mejora de 2.5 con respecto a la serie 3.x.

Por la parte de los cambios, podemos encontrar que se implementó soporte para el método mejorado de identificación de cliente JA3+TLS, que permite en base a las características de negociación de conexión y parámetros especificados, determinar qué software se usa para establecer una conexión (por ejemplo, permite determinar el uso de Tor y otras aplicaciones típicas).

Además se ha ampliado el número de detección de amenazas de red y problemas asociados con el riesgo de compromiso (riesgo de flujo) a 33, además de que se agregaron nuevos identificadores de amenazas relacionados con el escritorio y el intercambio de archivos, tráfico HTTP sospechoso, JA3 y SHA1 maliciosos, acceso a dominios problemáticos y sistemas autónomos, uso de certificados en TLS con extensiones sospechosas o fechas de vencimiento demasiado largas.

Tambien podremos encontrar que se ha añadido más soporte para protocolos y servicios, de los cuales ahora podremos encontrar: AmongUs, AVAST SecureDNS, CPHA (CheckPoint High Availability Protocol), DisneyPlus, DTLS, Genshin Impact, HP Virtual Machine Group Management (hpvirtgrp), Mongodb, Pinterest, Reddit, Snapchat VoIP, Tumblr, Virtual Asssitant (Alexa, Siri), Z39.50.

Mientras que para los servicios de análisis y detección que fueron mejorados en esta nueva versión se mencionan a: AnyDesk, DNS, Hulu, DCE/RPC, dnscrypt, Facebook, Fortigate, FTP Control, HTTP, IEC104, IEC60870, IRC, Netbios, Netflix, Ookla speedtest, openspeedtest.com, Outlook/MicrosoftMail, QUIC, RTSP protocolos, RTSP a través de HTTP, SNMP, Skype, SSH, Steam, STUN, TeamViewer, TOR, TLS, UPnP, wireguard.

De los demás cambios que se destacan de la nueva versión:

• Soporte mejorado para métodos de análisis de tráfico cifrado (ETA).
• A diferencia del método JA3 admitido anteriormente, JA3 + tiene menos falsos positivos.
• Se ha llevado a cabo una optimización significativa del rendimiento, en comparación con la rama 3.0, la velocidad de procesamiento del tráfico se ha incrementado en 2.5 veces.
• Se agregó soporte GeoIP para determinar la ubicación por dirección IP.
• API agregada para calcular RSI (índice de fuerza relativa).
• Se han implementado controles de fragmentación.
• API agregada para calcular la uniformidad del flujo (jitter).

Finalmente si estás interesado en poder conocer más al respecto, puedes consultar los detalles en el siguiente enlace.

from Linux Adictos https://ift.tt/3A9bzKJ
via IFTTT