Entrada

Linux 4.11: statx, RAID5 con journal y swap escalable

Linux 4.11 estrena statx, el journal de RAID5, swap escalable para SSD y un marco de schedulers multiqueue. Ciclo medio y sin drama.

Linux 4.11: statx, RAID5 con journal y swap escalable

Linux 4.11 salió el domingo 30 de abril de 2017 con statx, el journal de RAID5, swap escalable para SSD y un marco de schedulers para blk-mq. Un ciclo medio, sin drama y con la vista en 4.12.

Linux 4.11 se publicó el 30 de abril de 2017, al final de un ciclo medio en el que el bloque y la memoria se llevaron buena parte del trabajo. No bate ningún récord: es una release de transición, con varias piezas que preparan lo que llegaría en los meses siguientes. El resumen de cifras está en la tabla, pero el resumen es claro: menos novedad visible y más trabajo de base.

Hay tres claves. La primera es statx, la llamada que sustituye a stat() con más información y menos ambigüedad. La segunda es RAID5, que estrena un journal para cerrar el write hole. La tercera es el bloque: blk-mq gana un marco de schedulers enchufables y llega OPAL.

Y una mejora para portátiles y SSD: el swap se vuelve escalable, con menos contención y mejor rendimiento en discos rápidos.

Mapa de las claves de Linux 4.11: statx, RAID5, swap, schedulers, OPAL y SMC-R

El ciclo, en seis bloques. En ámbar, las tres que afectan a quien administra o programa sobre Linux.

Línea temporal de Linux 4.11: de 4.10 a la release, con la rc1 de marzo y la rc7 de abril

Entre 4.10 y 4.11 pasaron nueve semanas, con siete release candidates.

El ciclo de 4.11 llega después de un invierno de trabajo constante en el bloque y en la memoria, y lo hace sin sobresaltos de última hora. Ninguna pieza define por sí sola la release; varias preparan lo que vendría en los meses siguientes. Por eso conviene leerla como un ciclo de transición: menos llamativa que 4.12 y con más trabajo de base.

1. Las cifras de un ciclo medio

DatoValor
Fecha de release30 de abril de 2017
Versión anterior4.10 (19 de febrero de 2017)
Release candidates7
Changesets12.546
Desarrolladores1.723
Novatos278
Crecimiento~300.000 líneas

El ciclo arranca el 20 de febrero y cierra el 30 de abril, con siete rc, según las estadísticas de LWN. Queda en la media de 2017: ni el mayor ni el menor, y sin sobresaltos de última hora.

Phoronix repasa las novedades y el tarball cierra la release. El anuncio de LWN confirma la fecha y recuerda que el ciclo llegó sin retrasos, con una merge window que se cerró a tiempo y unos release candidates que no necesitaron semanas extra.

2. statx: la nueva llamada de estadísticas

stat() devuelve la información clásica de un fichero, pero se queda corta: no distingue el tipo de timestamps, no expone atributos nuevos y obliga a llamadas extra para algunos datos. En 4.11 entra statx(2), una llamada nueva con una máscara de campos, timestamps de nanosegundos y soporte para atributos que antes no cabían.

Diagrama de statx: stat, statx y la adopción de las herramientas

statx pide solo los campos necesarios y deja el resto a cero.

El caso de uso son las herramientas que necesitan saber si un fichero es inmutable, si tiene atributos de compresión o cuándo se creó. La aplicación pide solo los campos que quiere, y el kernel devuelve el resto como cero.

LWN lo explicó en statx() y la página de statx(2) tiene la estructura. Lo que falta: las bibliotecas y las herramientas tardan en adoptarla, y stat() sigue siendo la llamada común.

3. RAID5 con journal

RAID5 tiene un problema clásico: el write hole. Si el sistema cae mientras se actualiza un bloque y su paridad, la reconstrucción puede dejar datos incoherentes. La solución es un journal: escribir la intención antes de tocar el RAID, de modo que al arrancar se pueda completar o deshacer.

En 4.11, dm-raid añade journal para RAID4, 5 y 6. El journal puede estar en un dispositivo aparte o en el mismo, y el precio es espacio y escrituras extra. A cambio, el RAID sobrevive a un corte de luz sin corromper datos.

LWN lo contó en Journaling RAID5 y la documentación de md describe el montaje. Lo que falta: el journal no sustituye a un backup ni a un UPS, y el rendimiento de escritura baja.

4. Swap escalable para SSD

El swap tradicional usa una lista doblemente enlazada y un lock global: con muchos núcleos y un SSD rápido, el cuello de botella es el lock, no el disco. En 4.11 entra un swap escalable, con estructuras por CPU y un reparto mejor del trabajo.

El resultado se nota en servidores con memoria justa y discos NVMe: menos contención y mejor latencia al paginar. LWN lo explicó en Scalable swapping y la documentación de swap tiene los parámetros.

Lo que falta: el swap sigue siendo swap; en un equipo con RAM suficiente no se usa, y en uno con poca, el disco manda.

5. Schedulers multiqueue

blk-mq sustituyó la cola única del bloque por varias colas, pero el scheduler seguía siendo uno. En 4.11 entra un marco de schedulers para blk-mq, con el port de deadline como primer usuario. Es la base para BFQ y Kyber, que llegarían en 4.12.

El cambio no se nota en el usuario, pero prepara el bloque para NVMe y para los dispositivos con muchas colas. La documentación del bloque describe el marco, y el segundo commit añade el port de deadline.

Lo que falta: en 4.11 solo está deadline; las opciones avanzadas llegan después.

6. perf ftrace, OPAL y SMC-R

Tres piezas de nicho. perf ftrace integra el trazador de ftrace dentro de perf, con una interfaz más simple para ver funciones y latencias. OPAL permite cifrar discos con el estándar de TCG, con el controlador de disco haciendo el trabajo y las claves en el hardware.

SMC-R es el protocolo de IBM para compartir memoria sobre RDMA: dos máquinas con RoCE pueden hablar SMC en lugar de TCP y ahorrar copias. La documentación de perf y la de SMC tienen el detalle; TCP Fast Open estrena TCP_FASTOPEN_CONNECT.

Lo que falta: SMC-R necesita hardware y una configuración concreta; OPAL necesita un disco compatible; perf ftrace es una herramienta para quien ya sabe ftrace.

7. El salseo: un ciclo sin drama

No hubo pelea en 4.11. El ciclo fue medio y ordenado, y la conversación se fue a 4.12, que llegaría con BFQ, Kyber y el récord de desarrolladores. LWN cerró el ciclo con la crónica y las estadísticas del siguiente. El sitio de kernel.org mantiene el estado de las ramas. El único tema de fondo es el ritmo de parches: 2017 fue un año de crecimiento y el proyecto empezaba a notar el peso de más código y más revisores.

8. Por subsistemas

8.1 Core

statx es la pieza nueva; además, el kernel añade el controlador de cgroup para RDMA y el plugin structleak de grsecurity, que inicializa estructuras para evitar fugas de pila, más las estadísticas de kcompactd.

8.2 Ficheros

Btrfs acelera el borrado de checksums, SMB2.1/SMB3 habilita DFS y ext4 añade el ioctl de apagado y la opción debug_want_extra_isize. F2FS activa inline_xattr por defecto.

8.3 Bloque y memoria

El journal de RAID5 y el marco de schedulers son las claves. En memoria, memcg destruye slabs de forma escalable y THP añade el modo defer+madvise.

8.4 Networking y gráficos

SMC-R y RACK son las piezas de red; DRM estrena tinydrm para pantallas pequeñas y añade soporte de Geminilake en i915.

9. Lo que no llega

statx tarda en llegar a las bibliotecas; el journal de RAID5 cuesta espacio y rendimiento; SMC-R necesita hardware; OPAL necesita un disco compatible. Y el swap escalable no hace magia si el disco es lento. La documentación de parámetros, la de DAX y la de ext4 tienen lo que queda fuera.

10. Cambios menores

Una selección de lo que no cabe en las claves, con su enlace y su consecuencia.

Core

Ficheros

Memoria y bloque

Networking y gráficos

11. Qué viene después

La siguiente release es Linux 4.12, que llega el 2 de julio con BFQ, Kyber y el soporte preliminar de Vega. Su review y su tarball cierran el ciclo siguiente.

4.11 no es LTS: la rama de LTS sigue siendo 4.9.

La página de la serie 4.x reúne todas las entregas, el índice del kernel tiene las demás series y la entrega anterior es Linux 4.10.

12. Referencias

Esta entrada está licenciada bajo CC BY 4.0 por el autor.