Entrada

Linux 4.9: BBR, XFS reflink y la LTS récord

Linux 4.9 estrena BBR, XFS con reflink, pila virtual y el profiler BPF. Con 16.214 changesets es el ciclo más grande de la historia y la LTS de 2016.

Linux 4.9: BBR, XFS reflink y la LTS récord

Linux 4.9 salió el domingo 11 de diciembre de 2016 y se convirtió en la LTS de 2016 con el ciclo más grande de la historia: 16.214 changesets y 1.729 desarrolladores. Trae BBR, reflink en XFS, pila virtual y el profiler BPF.

Linux 4.9 se publicó el 11 de diciembre de 2016, al final de un ciclo que batió récords. La mayor parte del volumen viene de Greybus, el framework de Google para conectar periféricos móviles, que aporta 2.388 changesets; sin él, el ciclo seguiría siendo grande, pero no histórico.

Hay tres claves. La primera es la red: BBR cambia el control de congestión de TCP por un modelo basado en el ancho de banda y el RTT. La segunda es los ficheros: XFS estrena reflink y extents compartidos. La tercera es la seguridad: las pilas del kernel pasan a estar mapeadas virtualmente y las claves de protección llegan a las syscalls.

Y una herramienta nueva: el profiler BPF, que permite muestrear el kernel con programas eBPF y analizar el rendimiento sin recompilar.

Mapa de las claves de Linux 4.9: BBR, XFS, pilas, BPF, pkeys y Greybus

El ciclo, en seis bloques. En ámbar, las tres que afectan a quien administra o programa sobre Linux.

Línea temporal de Linux 4.9: de 4.8 a la release, con la rc1 de octubre y la rc8 de diciembre

Del 4.8 al 4.9 pasaron doce semanas, con ocho release candidates y un récord.

1. Las cifras del récord

DatoValor
Fecha de release11 de diciembre de 2016
Versión anterior4.8 (25 de septiembre de 2016)
Release candidates8
Changesets16.214
Desarrolladores1.729
Greybus2.388 changesets

El ciclo arranca el 26 de septiembre y cierra el 11 de diciembre, con ocho rc, según las estadísticas de LWN. Los 16.214 changesets superan el récord anterior de 3.15 (13.722) y convierten a 4.9 en el ciclo más grande hasta la fecha.

Phoronix repasa las novedades y el tarball cierra la release.

XFS estrena reflink: dos ficheros pueden compartir extents hasta que uno de ellos cambia, y entonces se copia solo el bloque modificado. Es la base de cp --reflink, de la deduplicación y de los snapshots eficientes.

El caso de uso son los backups y los contenedores: una imagen base compartida por cien contenedores ocupa una vez, y cada cambio se copia. La documentación de XFS describe las opciones.

Lo que falta: reflink necesita un sistema de ficheros creado con la función activada y espacio para los metadatos; en 4.9 es experimental.

3. BBR: el control de congestión de Google

BBR (Bottleneck Bandwidth and ida y vuelta propagation time) es un algoritmo de control de congestión que no reacciona a la pérdida de paquetes, sino que estima el ancho de banda del cuello de botella y el RTT mínimo, y envía a ese ritmo.

Diagrama de BBR: CUBIC, BBR y el resultado

BBR estima el ancho de banda y el RTT en vez de reaccionar a la pérdida.

En 4.9 entra BBR como algoritmo de TCP, seleccionable con net.ipv4.tcp_congestion_control=bbr. El resultado se nota en enlaces con pérdidas y RTT alto: más rendimiento y menos colas que CUBIC.

LWN lo explicó en BBR y la documentación de TCP tiene los parámetros. Lo que falta: BBR no es justo con todos los flujos y puede ocupar más cola de la cuenta en algunos escenarios.

4. Pilas virtuales

El kernel usa la pila del proceso para las llamadas al sistema, y esa pila es un recurso compartido y predecible. En 4.9 las pilas del kernel pasan a estar mapeadas virtualmente: cada tarea tiene su propia pila, con guardas y sin solaparse con otras.

El cambio mejora la seguridad (un desbordamiento no pisa la pila de otra tarea) y la fiabilidad de las trazas. LWN lo contó en Virtually mapped stacks y la documentación de VM describe el mapa.

Lo que falta: el cambio consume más memoria virtual y obliga a ajustar algunas arquitecturas.

5. Profiler BPF y pkeys

El profiler BPF permite muestrear el kernel con programas eBPF: se engancha a los eventos de perf y agrega datos en mapas, con menos coste que ftrace y más flexibilidad que los contadores fijos.

Las claves de protección (pkeys) llegan a las syscalls: un proceso puede crear una clave, asignarla a un rango de memoria y cambiar sus permisos sin mprotect. Es la base de los allocators con protección y de los sandboxes.

LWN contó las pkeys en Protection keys y la documentación de BPF tiene el profiler. Lo que falta: pkeys necesita CPU con PKU y el profiler exige escribir programas.

6. Greybus

Greybus es el framework de Google para conectar periféricos a móviles mediante el protocolo Unipro. En 4.9 entra Greybus y aporta 2.388 changesets, la razón principal del récord del ciclo.

El caso de uso es el hardware de Project Ara y los módulos de teléfono; en la práctica, es un driver más que un cambio para el usuario.

Lo que falta: el proyecto Ara se canceló y Greybus quedó como código de nicho, aunque su volumen explica el récord de 4.9.

7. El salseo: el récord y la LTS

No hubo pelea en 4.9. La conversación es el récord: 16.214 changesets, impulsados por Greybus, y 1.729 desarrolladores. LWN lo llamó el ciclo más cargado de la historia. La release se convierte en LTS, con soporte previsto durante años, y las distribuciones empiezan a planificar su adopción. La crónica de 4.10 abre el ciclo siguiente y el sitio de kernel.org mantiene el estado de las ramas.

8. Por subsistemas

8.1 Red

BBR es la estrella; además, el ciclo mejora el soporte de IPv6, añade CALIPSO y amplía los drivers de red. TCP y UDP reciben ajustes de rendimiento.

8.2 Ficheros y bloque

XFS reflink es la pieza nueva; Btrfs y ext4 reciben correcciones y mejoras. El bloque añade opciones de depuración y los drivers NVMe siguen creciendo.

8.3 Seguridad y virtualización

Las pilas virtuales y las pkeys son las claves; KVM mejora el soporte de invitados y los drivers de virtio se amplían.

9. Lo que no llega

BBR no es justo con todos los flujos; reflink es experimental; pkeys necesita hardware; Greybus es un proyecto cancelado. Y el récord de changesets no significa que todo el código sea para el usuario. La documentación de md, la de DAX y los parámetros tienen lo que queda fuera.

10. Cambios menores

Una selección de lo que no cabe en las claves, con su enlace y su consecuencia.

Core

Networking

Seguridad y ficheros

11. Qué viene después

La siguiente release es Linux 4.10, que llega el 19 de febrero de 2017 con GPU virtual, perf c2c y BPF en cgroups. Sus estadísticas y su tarball cierran el ciclo siguiente.

4.9 es la LTS de la serie: quien busque estabilidad en 2017 se queda aquí hasta 4.14.

La página de la serie 4.x reúne todas las entregas, el índice del kernel tiene las demás series y la entrega anterior es Linux 4.8.

12. Referencias

Esta entrada está licenciada bajo CC BY 4.0 por el autor.