Linux 3.9: Btrfs con paridad y una caché SSD en el kernel
Linux 3.9 estrena RAID 5/6 experimental en Btrfs, dm-cache para usar un SSD como caché, KVM en ARM, el estado freeze y dos arquitecturas nuevas.
Linux 3.9 se ha publicado hoy, 28 de abril de 2013, con RAID 5/6 experimental en Btrfs, dm-cache para usar un SSD como caché, KVM en ARM y el estado de suspensión freeze. Suma dos arquitecturas nuevas, ARC 700 y Meta, y retira CONFIG_EXPERIMENTAL, una opción que ya no servía para nada.
Linux 3.9 se publicó el domingo 28 de abril de 2013, 69 días después de 3.8 y con ocho release candidates: LWN daba por hecho que la rc7 sería la última y que la release llegaría hacia el 21 de abril, pero hubo rc8 y una semana más. El ciclo no batió el récord de changesets de 3.8, pero sí otro: 1.364 desarrolladores hasta la rc7 (1.388 al cerrar), la cifra más alta hasta entonces, según LWN.
Las cifras quedan así: 11.746 changesets y 1.364 desarrolladores hasta la rc7, con Takashi Iwai a la cabeza (265 changesets, 2,3 %), seguido de H Hartley Sweeten (259, 2,2 %), Al Viro (208, 1,8 %) y Tejun Heo (186, 1,6 %). Es un ciclo con muchos cambios pequeños y pocas features grandes: muchas piezas pequeñas en drivers, sonido y VFS, y unas cuantas features grandes que llegan con etiqueta de experimental.
Hay tres claves. La primera es el almacenamiento: Btrfs se atreve con RAID 5 y 6, y dm-cache convierte un SSD en caché de un disco lento sin cambiar el sistema de ficheros. La segunda es la virtualización: KVM llega a ARM y el emulador goldfish de Android entra en el tree. La tercera es la energía: aparece el estado freeze y el driver PowerClamp de Intel.
Y un ajuste de fondo: CONFIG_EXPERIMENTAL desaparece. La opción que durante años marcó las features «no para todos» se retira porque casi todas las distribuciones la activaban por defecto; a partir de ahora, cada opción avisa con «(EXPERIMENTAL)» en su título.
Las seis piezas del ciclo. En ámbar, las tres que cambian algo para quien administra o programa sobre Linux.
Del 3.8 al 3.9: una merge window de dos semanas, ocho release candidates y una semana más de la prevista.
1. Las cifras del ciclo con más desarrolladores
| Dato | Valor |
|---|---|
| Fecha de release | 28 de abril de 2013 |
| Versión anterior | 3.8 (18 de febrero de 2013) |
| Merge window | 19 de febrero al 3 de marzo de 2013 |
| Release candidates | 8 (rc1 el 3 de marzo, rc8 el 21 de abril) |
| Ciclo | 69 días |
| Changesets | 11.746 |
| Desarrolladores | 1.364 (hasta la rc7; 1.388 al cerrar) |
| Autor con más changesets | Takashi Iwai (265) |
Los números son de LWN, que publicó el reparto el 17 de abril contando hasta la rc7. 3.9 no supera los 12.300 changesets de 3.8, pero sí el número de personas: 1.364 desarrolladores, un récord que se explica porque el trabajo estuvo muy repartido. Takashi Iwai encabeza la lista por el trabajo en sonido; H Hartley Sweeten sigue con la limpieza de comedi, y Al Viro y Tejun Heo aparecen por VFS y por el trabajo de colas y cgroups.
La duración también cuenta: LWN proyectaba 62 días si la rc7 era la última, pero hubo rc8 y la release llegó a los 69 días. No es un ciclo largo para la época —ninguno después de 3.3 pasó de 71 días—, pero sí el primero desde hacía tiempo que necesitó una ronda extra.
2. Btrfs se atreve con RAID 5 y 6
Btrfs podía hacer RAID 0, 1 y 10, pero no RAID 5 ni 6, los perfiles con paridad que permiten perder un disco (o dos) sin duplicar los datos. 3.9 añade los dos con el merge de los parches de paridad, y lo hace con una etiqueta clara: experimental y no seguro ante caídas.
Hay un matiz importante. La paridad se calcula y se escribe, pero el write hole sigue ahí: si se corta la corriente en mitad de una escritura, los datos y la paridad pueden quedar incoherentes y el sistema no siempre puede saber cuál es la copia buena. Para un laboratorio o para probar, sirve; para datos importantes, la recomendación sigue siendo RAID 1 o 10. La comunidad tardaría años en resolver esa limitación.
El otro cambio de Btrfs es menos llamativo y más útil: la defragmentación respeta las snapshots. Como Btrfs comparte bloques entre snapshots, desfragmentar podía romper esa compartición y duplicar el espacio usado; ahora el proceso tiene en cuenta las referencias y no deshace el ahorro (38c227d87c49).
3. dm-cache: un SSD como caché del disco lento
La idea no es nueva: lo que más se usa, en el dispositivo rápido; el resto, en el grande. dm-cache la lleva al device mapper con un target nuevo: se declara un dispositivo rápido (un SSD) como caché de uno lento (un disco), y el kernel mueve bloques entre ambos según una política. El usuario sigue viendo un solo dispositivo, con el sistema de ficheros de siempre encima.
El target entra con la documentación y el código en el mismo ciclo y admite dos modos: writethrough, en el que las escrituras van a los dos dispositivos, y writeback, en el que se quedan en la caché y bajan después. También permite conectar políticas distintas para decidir qué bloques se promocionan y cuáles se expulsan.
El problema está en la configuración: hay que crear el volumen, elegir el tamaño de bloque y la política, y aceptar que un fallo del SSD en modo writeback puede costar datos. Para un portátil con un SSD pequeño y un disco grande, o para un servidor con una caché NVMe delante de los discos, es muy útil.
dm-cache mueve bloques entre el SSD y el disco según la política; el sistema de ficheros sigue viendo un solo dispositivo.
4. El estado freeze: suspender sin apagar del todo
Linux tenía tres estados de suspensión: freeze, mem y disk. En 3.9, freeze deja de ser un paso interno y se convierte en un estado que se puede pedir desde espacio de usuario con echo freeze > /sys/power/state. Congela los procesos, suspende los dispositivos y deja las CPU inactivas, sin apagar la memoria ni pasar por la BIOS.
Sirve para las plataformas que no tienen suspensión a RAM o la tienen rota, y en los equipos con un estado idle tan bajo que hace innecesario el mem clásico. Gasta más que mem —la memoria sigue refrescándose— pero reanuda mucho más rápido, porque no hay que restaurar nada desde el disco ni esperar al firmware. El commit es 7e73c5ae6e79.
No sustituye a mem en un portátil que quiere aguantar días: para eso sigue haciendo falta suspender a RAM o hibernar. Es una pieza para servidores, para placas embebidas y para máquinas virtuales, donde el coste de reanudar importa más que el consumo en reposo.
5. KVM en ARM y dos arquitecturas nuevas
El ciclo lleva KVM a ARM: la virtualización deja de ser exclusiva de x86 y Power y llega a los SoC ARM con extensiones de virtualización (749cf76c5a36). Para la época, es la base de los servidores ARM y de los entornos de desarrollo que hoy se ejecutan en placas pequeñas.
Además entran dos arquitecturas nuevas. ARC 700, de Synopsys, es un núcleo RISC de 32 bits con MMU que se usa en decodificadores de televisión y reproductores multimedia; su port está en arch/arc. Meta, de Imagination Technologies, es un procesador multihilo con instrucciones de DSP que aparece en radios digitales y puede correr Linux en uno de sus hilos mientras los demás ejecutan un RTOS; su port está en arch/metag.
Los dos ports siguen el mismo esquema: una empresa con hardware propio paga el port y lo mantiene. Para el usuario no cambian nada; para el kernel, son dos destinos más que antes necesitaban parches fuera del tree.
6. Chrome OS, goldfish y el hardware de consumo
Chrome OS recibe soporte completo para los portátiles que vende Google y sus fabricantes: el ciclo añade los drivers que faltaban para que un Chromebook arranque con un kernel de mainline (d1381f45ad54). Es un cambio menos llamativo que una arquitectura nueva, pero afecta a millones de equipos que hasta entonces dependían de un árbol propio.
En Android, entra goldfish, la plataforma virtual que usa el SDK: una CPU ARM emulada en QEMU con drivers de batería, MMC, audio y gráficos (ddd70cf93d78). Hasta 3.9, desarrollar para Android exigía un kernel aparte; con goldfish en el tree, el emulador funciona con un kernel estándar.
7. El salseo: «tu trabajo no es integrar»
El 2 de marzo de 2013, con la rc1 recién publicada, James Hogan envió un pull de arreglos «late» para la arquitectura metag después de rebasar el árbol. Torvalds le contestó con una lección de proceso: «You are the architecture maintainer, and your job is not integration, it’s to make sure that your work is as stable and unsurprising as possible», escribió en el hilo. Y remató con la pregunta que ya había usado otras veces: «See why I hate rebasing and back-merges so much?».
Hogan aceptó el razonamiento y explicó que no quería rebasar, pero que el árbol se había desviado. No hubo reversión ni cambio de maintainer; el pull entró por la vía normal en la siguiente ronda, y el port de metag siguió en el tree. Es lo mismo que volvería a pasar en 3.18 con el pull de seguridad: un rebase o un back-merge cambia lo que el maintainer de arriba ve y rompe la confianza en el árbol.
8. CONFIG_EXPERIMENTAL desaparece
Durante años, CONFIG_EXPERIMENTAL fue la opción que había que activar para probar features que «no eran para todos». Con el tiempo, casi todas las distribuciones lo activaban por defecto y la etiqueta dejó de significar nada: el usuario no sabía qué estaba activando y los desarrolladores no tenían un criterio claro para marcar algo como experimental.
En 3.9 se retira (5a958db311c4) y se sustituye por una convención más simple: la opción lleva «(EXPERIMENTAL)» en el título y su texto de ayuda explica el riesgo. Para quien compile un kernel, hay una opción menos que buscar; para quien mantenga una distribución, es una señal más clara de qué está activando.
9. Por subsistemas
9.1 Core y bloque
El PCIe Non-Transparent Bridge (NTB) entra en el tree (fce8a7bb5b4b), la pieza que permite conectar dos hosts por PCIe y compartir memoria. El layer TTY se puede compilar fuera con CONFIG_TTY (4f73bc4dd3e8) para sistemas que no lo necesitan, y la firma de módulos gana opciones para firmar con sign-file y para no firmar durante modules_install.
9.2 Energía y virtualización
Intel PowerClamp inyecta estados idle de forma sincronizada en todas las CPU para mantener una proporción de C-state (d6d71ee4a14a); LWN lo explicó en The PowerClamp driver. En virtualización, además de KVM en ARM, el ciclo suma soporte para goldfish y para más dispositivos virtio.
9.3 Drivers y arquitecturas
Chrome OS, ARC y Meta son las entradas grandes; en el resto, el ciclo sigue el patrón de siempre: nuevos IDs de hardware, drivers de red y de sonido, y limpieza de staging. La lista completa está en el inventario de drivers.
9.4 Sistemas de ficheros
Además del RAID 5/6 y del defrag de Btrfs, el ciclo toca ext4, XFS y F2FS con correcciones y mejoras pequeñas; F2FS sigue en experimental y empieza a recibir atención fuera de Samsung. Es un ciclo de consolidación; nadie cambia el formato de disco.
10. Lo que no llega
- El RAID 5/6 de Btrfs no es seguro ante caídas. La paridad se escribe, pero el write hole sigue abierto; para datos importantes, RAID 1 o 10 (la tabla de estado de Btrfs lo mantiene en experimental).
- dm-cache exige configuración manual. Hay que crear el volumen, elegir política y tamaño de bloque, y en modo
writebackun fallo del SSD puede costar datos (la documentación del target). - ARC 700 y Meta son puertos de empresa. Funcionan en el hardware de Synopsys e Imagination, pero no hay placas de consumo ni distribución que los empaquete (inventario).
- KVM en ARM depende del SoC. Necesita extensiones de virtualización y firmware que aún eran raros en 2013 (
arch/arm/kvmen 3.9).
11. Cambios menores
Una selección de lo que no cabe en las claves, con su enlace y su consecuencia.
Core
- firmar con
sign-file -s— elegir la firma al firmar un módulo. - no firmar al instalar —
modules_installpuede saltarse la firma. - fuera la API de trazas de energía — código obsoleto que nadie usaba.
CONFIG_RTC_SYSTOHC— el reloj del sistema en ARM sin RTC propio.madvise(MADV_WILLNEED)con swap — precargar también desde swap.- etiqueta del sistema de ficheros — un ioctl para leerla sin montar.
Almacenamiento y ficheros
- direct-io sin candado — escritura directa con menos contención.
- menos espera en extents diferidos — XFS reduce la contención al reservar espacio.
12. Qué viene después
La merge window de Linux 3.10 se abrió el 28 de abril y la release llegó el 30 de junio, con bcache —el sistema de caché de bloques que compite con dm-cache—, el soporte de la GPU Radeon HD 8000 y el primer trabajo serio en el controlador de memoria de los Haswell. También es el ciclo en el que Torvalds rechazó un pull de bloque por llegar «al final de la merge window».
Para quien administre sistemas, 3.9 es la release de dm-cache y del freeze: dos formas de aprovechar mejor el hardware sin cambiar de distribución. Para quien programe, es la release en la que KVM deja de ser solo x86 y el emulador de Android deja de necesitar un kernel aparte.
La serie 3.x sigue en la página de la serie y el índice del kernel reúne las demás. La entrega anterior es Linux 3.8.
