Una regla define una serie de acciones que Bazel realiza en las entradas para producir un conjunto de resultados, a los que se hace referencia en los proveedores que muestra la función de implementación de la regla. Por ejemplo, una regla binaria de C++ podría tener las siguientes características:
- Toma un conjunto de archivos de origen (entradas) de
.cpp
. - Ejecuta
g++
en los archivos fuente (acción). - Muestra el proveedor
DefaultInfo
con el resultado ejecutable y otros archivos para que estén disponibles en el tiempo de ejecución. - Devuelve el proveedor
CcInfo
con información específica de C++ recopilada del objetivo y sus dependencias.
Desde la perspectiva de Bazel, g++
y las bibliotecas estándar de C++ también son entradas para esta regla. Como escritor de reglas, debes tener en cuenta no solo las entradas proporcionadas por el usuario a una regla, sino también todas las herramientas y bibliotecas necesarias para ejecutar las acciones.
Antes de crear o modificar cualquier regla, asegúrate de estar familiarizado con las fases de compilación de Bazel. Es importante comprender las tres fases de una compilación (carga, análisis y ejecución). También es útil aprender sobre las macros para comprender la diferencia entre reglas y macros. Para comenzar, revisa el instructivo de reglas. Luego, usa esta página como referencia.
Algunas reglas están integradas en Bazel. Estas reglas nativas, como genrule
y filegroup
, proporcionan cierta compatibilidad principal.
Si defines tus propias reglas, puedes agregar compatibilidad con lenguajes y herramientas
que Bazel no admite de forma nativa.
Bazel proporciona un modelo de extensibilidad para escribir reglas con el lenguaje Starlark. Estas reglas se escriben en archivos .bzl
, que se pueden cargar directamente desde archivos BUILD
.
Cuando defines tu propia regla, puedes decidir qué atributos admite y cómo genera sus resultados.
La función implementation
de la regla define su comportamiento exacto durante la fase de análisis. Esta función no ejecuta ningún comando externo. En cambio, registra las acciones que se usarán más adelante durante la fase de ejecución para compilar los resultados de la regla, si es necesario.
Creación de reglas
En un archivo .bzl
, usa la función rule para definir una nueva
regla y almacenar el resultado en una variable global. La llamada a rule
especifica atributos y una función de implementación:
example_library = rule(
implementation = _example_library_impl,
attrs = {
"deps": attr.label_list(),
...
},
)
Esto define un tipo de regla llamado example_library
.
La llamada a rule
también debe especificar si la regla crea un resultado ejecutable (con executable = True
) o, específicamente, un ejecutable de prueba (con test = True
). Si es lo último, la regla es una regla de prueba y el nombre de la regla debe terminar en _test
.
Creación de instancias de destino
Las reglas se pueden cargar y llamar en archivos BUILD
:
load('//some/pkg:rules.bzl', 'example_library')
example_library(
name = "example_target",
deps = [":another_target"],
...
)
Cada llamada a una regla de compilación no muestra ningún valor, pero tiene el efecto secundario de definir un objetivo. Esto se denomina creación de una instancia de la regla. Especifica un nombre para el objetivo nuevo y valores para los atributos del objetivo.
También se puede llamar a las reglas desde funciones de Starlark y cargarlas en archivos .bzl
.
Las funciones de Starlark que llaman a reglas se llaman macros de Starlark.
En última instancia, se debe llamar a las macros de Starlark desde los archivos BUILD
y solo se puede llamar a estas durante la fase de carga, cuando se evalúan los archivos BUILD
para crear instancias de destinos.
Atributos
Un atributo es un argumento de regla. Los atributos pueden proporcionar valores específicos a la implementación de un objetivo o pueden hacer referencia a otros objetivos, lo que crea un gráfico de dependencias.
Los atributos específicos de la regla, como srcs
o deps
, se definen pasando un mapa de nombres de atributos a esquemas (creados con el módulo attr
) al parámetro attrs
de rule
.
Los atributos comunes, como name
y visibility
, se agregan de forma implícita a todas las reglas. Los atributos adicionales se agregan de forma implícita a las reglas de ejecución y prueba específicamente. Los atributos que se agregan de forma implícita a una regla no se pueden incluir en el diccionario que se pasa a attrs
.
Atributos de dependencia
Las reglas que procesan el código fuente suelen definir los siguientes atributos para controlar varios tipos de dependencias:
srcs
especifica los archivos de origen que procesan las acciones de un destino. A menudo, el esquema de atributos especifica qué extensiones de archivo se esperan para el tipo de archivo fuente que procesa la regla. Las reglas para idiomas con archivos de encabezados generalmente especifican un atributohdrs
independiente para los encabezados que procesa un destino y sus consumidores.deps
especifica las dependencias de código para un destino. El esquema de atributos debe especificar qué proveedores deben proporcionar esas dependencias. (Por ejemplo,cc_library
proporcionaCcInfo
).data
especifica los archivos que se pondrán a disposición en el tiempo de ejecución para cualquier ejecutable que dependa de un destino. Eso debería permitir que se especifiquen archivos arbitrarios.
example_library = rule(
implementation = _example_library_impl,
attrs = {
"srcs": attr.label_list(allow_files = [".example"]),
"hdrs": attr.label_list(allow_files = [".header"]),
"deps": attr.label_list(providers = [ExampleInfo]),
"data": attr.label_list(allow_files = True),
...
},
)
Estos son ejemplos de atributos de dependencia. Cualquier atributo que especifique una etiqueta de entrada (aquellos definidos con attr.label_list
, attr.label
o attr.label_keyed_string_dict
) especifica dependencias de un tipo determinado entre un objetivo y los objetivos cuyas etiquetas (o los objetos Label
correspondientes) se enumeran en ese atributo cuando se define el objetivo. El repositorio y, posiblemente, la ruta de acceso de estas etiquetas se resuelven en relación con el objetivo definido.
example_library(
name = "my_target",
deps = [":other_target"],
)
example_library(
name = "other_target",
...
)
En este ejemplo, other_target
es una dependencia de my_target
y, por lo tanto, other_target
se analiza primero. Se produce un error si hay un ciclo en el gráfico de dependencias de los destinos.
Atributos privados y dependencias implícitas
Un atributo de dependencia con un valor predeterminado crea una dependencia implícita. Es implícita porque es parte del gráfico de destino que el usuario no especifica en un archivo BUILD
. Las dependencias implícitas son útiles para codificar una relación entre una regla y una herramienta (una dependencia de tiempo de compilación, como un compilador), ya que, la mayor parte del tiempo, un usuario no está interesado en especificar qué herramienta usa la regla. Dentro de la función de implementación de la regla, esto se trata de la misma manera que otras dependencias.
Si deseas proporcionar una dependencia implícita sin permitir que el usuario
supere ese valor, puedes hacer que el atributo sea privado. Para ello, dale un nombre
que comience con un guion bajo (_
). Los atributos privados deben tener valores
predeterminados. Por lo general, solo tiene sentido usar atributos privados para dependencias implícitas.
example_library = rule(
implementation = _example_library_impl,
attrs = {
...
"_compiler": attr.label(
default = Label("//tools:example_compiler"),
allow_single_file = True,
executable = True,
cfg = "exec",
),
},
)
En este ejemplo, cada destino de tipo example_library
tiene una dependencia implícita del compilador //tools:example_compiler
. Esto permite que la función de implementación de example_library
genere acciones que invoquen al compilador, aunque el usuario no haya pasado su etiqueta como entrada. Dado que _compiler
es un atributo privado, se deduce que ctx.attr._compiler
siempre apuntará a //tools:example_compiler
en todos los destinos de este tipo de regla. Como alternativa, puedes asignar el nombre compiler
al atributo sin el guion bajo y mantener el valor predeterminado. Esto permite a los usuarios sustituir un compilador diferente si es necesario, pero no requiere conocimiento de la etiqueta del compilador.
Por lo general, las dependencias implícitas se usan para herramientas que residen en el mismo repositorio que la implementación de la regla. Si la herramienta proviene de la plataforma de ejecución o de un repositorio diferente, la regla debe obtener esa herramienta de una cadena de herramientas.
Atributos de salida
Los atributos de salida, como attr.output
y attr.output_list
, declaran un archivo de salida que genera el destino. Estos se diferencian de los atributos de dependencia de dos maneras:
- Definen los objetivos del archivo de salida en lugar de hacer referencia a destinos definidos en otro lugar.
- Los destinos de archivos de salida dependen del destino de la regla con instanciación, en lugar de lo contrario.
Por lo general, los atributos de salida solo se usan cuando una regla necesita crear resultados con nombres definidos por el usuario que no se pueden basar en el nombre del destino. Si una regla tiene un atributo de salida, por lo general, se denomina out
o outs
.
Los atributos de salida son la forma preferida de crear salidas declaradas previamente, de las que se puede depender o solicitar en la línea de comandos de forma específica.
Función de implementación
Cada regla requiere una función implementation
. Estas funciones se ejecutan de forma estricta en la fase de análisis y transforman el grafo de objetivos generado en la fase de carga en un grafo de acciones que se realizarán durante la fase de ejecución. Por lo tanto, las funciones de implementación no pueden leer ni escribir archivos.
Las funciones de implementación de reglas suelen ser privadas (se nombran con una virgulilla al principio). De manera convencional, se les asigna el mismo nombre que a su regla, pero con el sufijo _impl
.
Las funciones de implementación toman exactamente un parámetro: un contexto de reglas, llamado convencionalmente ctx
. Muestran una lista de proveedores.
Destinos
Las dependencias se representan en el momento del análisis como objetos Target
. Estos objetos contienen los proveedores generados cuando se ejecutó la función de implementación del objetivo.
ctx.attr
tiene campos que corresponden a los nombres de cada atributo de dependencia, que contienen objetos Target
que representan cada dependencia directa con ese atributo. Para los atributos label_list
, esta es una lista de Targets
. Para los atributos label
, es un solo Target
o None
.
La función de implementación de un destino muestra una lista de objetos de proveedor:
return [ExampleInfo(headers = depset(...))]
Se puede acceder a ellos con la notación de índice ([]
), con el tipo de proveedor como clave. Pueden ser proveedores personalizados definidos en Starlark o proveedores para reglas nativas disponibles como variables globales de Starlark.
Por ejemplo, si una regla toma archivos de encabezado con un atributo hdrs
y los proporciona a las acciones de compilación del destino y sus consumidores, podría recopilarlos de la siguiente manera:
def _example_library_impl(ctx):
...
transitive_headers = [hdr[ExampleInfo].headers for hdr in ctx.attr.hdrs]
Hay un estilo de struct heredado, que no se recomienda en absoluto, y las reglas deben migrarse de él.
Archivos
Los archivos se representan con objetos File
. Dado que Bazel no realiza operaciones de E/S de archivos durante la fase de análisis, estos objetos no se pueden usar para leer o escribir contenido de archivos directamente. En cambio, se pasan a las funciones que emiten acciones (consulta ctx.actions
) para construir partes del gráfico de acciones.
Un File
puede ser un archivo fuente o un archivo generado. Cada archivo generado debe ser el resultado de exactamente una acción. Los archivos fuente no pueden ser el resultado de ninguna acción.
Para cada atributo de dependencia, el campo correspondiente de ctx.files
contiene una lista de los resultados predeterminados de todas las dependencias que usan ese atributo:
def _example_library_impl(ctx):
...
headers = depset(ctx.files.hdrs, transitive = transitive_headers)
srcs = ctx.files.srcs
...
ctx.file
contiene un solo File
o None
para los atributos de dependencia cuyas especificaciones establecen allow_single_file = True
.
ctx.executable
se comporta de la misma manera que ctx.file
, pero solo contiene campos para atributos de dependencia cuyas especificaciones establecen executable = True
.
Cómo declarar resultados
Durante la fase de análisis, la función de implementación de una regla puede crear resultados.
Dado que todas las etiquetas deben conocerse durante la fase de carga, estos resultados adicionales no tienen etiquetas. Los objetos File
para los resultados se pueden crear con ctx.actions.declare_file
y ctx.actions.declare_directory
.
A menudo, los nombres de los resultados se basan en el nombre del destino, ctx.label.name
:
def _example_library_impl(ctx):
...
output_file = ctx.actions.declare_file(ctx.label.name + ".output")
...
En el caso de los resultados declarados con anterioridad, como los creados para atributos de salida, los objetos File
se pueden recuperar desde los campos correspondientes de ctx.outputs
.
Acciones
Una acción describe cómo generar un conjunto de resultados a partir de un conjunto de entradas, por ejemplo, "run gcc on hello.c and get hello.o". Cuando se crea una acción, Bazel no ejecuta el comando de inmediato. Se registra en un gráfico de dependencias, ya que una acción puede depender del resultado de otra acción. Por ejemplo, en C, se debe llamar al vinculador después del compilador.
Las funciones de uso general que crean acciones se definen en ctx.actions
:
ctx.actions.run
, para ejecutar un ejecutablectx.actions.run_shell
para ejecutar un comando de shellctx.actions.write
para escribir una cadena en un archivo.ctx.actions.expand_template
para generar un archivo a partir de una plantilla.
Se puede usar ctx.actions.args
para acumular de manera eficiente los argumentos de las acciones. Evita que se compactan los depsets hasta el tiempo de ejecución:
def _example_library_impl(ctx):
...
transitive_headers = [dep[ExampleInfo].headers for dep in ctx.attr.deps]
headers = depset(ctx.files.hdrs, transitive = transitive_headers)
srcs = ctx.files.srcs
inputs = depset(srcs, transitive = [headers])
output_file = ctx.actions.declare_file(ctx.label.name + ".output")
args = ctx.actions.args()
args.add_joined("-h", headers, join_with = ",")
args.add_joined("-s", srcs, join_with = ",")
args.add("-o", output_file)
ctx.actions.run(
mnemonic = "ExampleCompile",
executable = ctx.executable._compiler,
arguments = [args],
inputs = inputs,
outputs = [output_file],
)
...
Las acciones toman una lista o descarga de archivos de entrada y generan una lista (no vacía) de archivos de salida. El conjunto de archivos de entrada y salida debe ser conocido durante la fase de análisis. Puede depender del valor de los atributos, incluidos los proveedores de dependencias, pero no puede depender del resultado de la ejecución. Por ejemplo, si tu acción ejecuta el comando unzip, debes especificar qué archivos esperas que se expandan (antes de ejecutar unzip). Las acciones que crean una cantidad variable de archivos a nivel interno pueden agruparlos en un solo archivo (como ZIP, TAR o algún otro formato de archivo).
Las acciones deben enumerar todas sus entradas. Se permite enumerar entradas que no se usan, pero no es eficiente.
Las acciones deben crear todos sus resultados. Pueden escribir otros archivos, pero todo lo que no esté en los resultados no estará disponible para los consumidores. Todas las salidas declaradas deben escribirse mediante alguna acción.
Las acciones son comparables a las funciones puras: deben depender solo de las entradas proporcionadas y evitar el acceso a la información de la computadora, el nombre de usuario, el reloj, la red o los dispositivos de E/S (excepto para leer entradas y escribir salidas). Esto es importante porque el resultado se almacenará en caché y se reutilizará.
Bazel resuelve las dependencias y decide qué acciones ejecutar. Se produce un error si hay un ciclo en el gráfico de dependencias. Crear una acción no garantiza que se ejecutará, eso depende de si sus resultados son necesarios para la compilación.
Proveedores
Los proveedores son datos que una regla expone a otras reglas que dependen de ella. Estos datos pueden incluir archivos de salida, bibliotecas, parámetros para pasar en la línea de comandos de una herramienta o cualquier otra información que los consumidores de un destino deban conocer.
Dado que la función de implementación de una regla solo puede leer proveedores de las dependencias inmediatas del destino creado, las reglas deben reenviar cualquier información de las dependencias de un destino que los consumidores de ese destino deban conocer, por lo general, acumulándola en un depset
.
Los proveedores de un destino se especifican con una lista de objetos de proveedor que muestra la función de implementación.
Las funciones de implementación anteriores también se pueden escribir en un estilo heredado en el que la función de implementación muestra un struct
en lugar de una lista de objetos del proveedor. No se recomienda este estilo y se deben migrar las reglas.
Salidas predeterminadas
Las salidas predeterminadas de un destino son las que se solicitan de forma predeterminada cuando se solicita el destino para la compilación en la línea de comandos. Por ejemplo, un //pkg:foo
objetivo java_library
tiene foo.jar
como resultado predeterminado, por lo que el comando bazel build //pkg:foo
lo compilará.
Los resultados predeterminados se especifican mediante el parámetro files
de DefaultInfo
:
def _example_library_impl(ctx):
...
return [
DefaultInfo(files = depset([output_file]), ...),
...
]
Si una implementación de reglas no muestra DefaultInfo
o no se especifica el parámetro files
, DefaultInfo.files
se establece de forma predeterminada en todas las salidas declaradas previamente (por lo general, las que crean los atributos de salida).
Las reglas que realizan acciones deben proporcionar resultados predeterminados, incluso si no se espera que esos resultados se usen directamente. Se eliminan las acciones que no están en el gráfico de los resultados solicitados. Si los consumidores de un destino solo usan un resultado, esas acciones no se realizarán cuando el destino se compile de forma independiente. Esto dificulta la depuración, ya que volver a compilar solo el destino con errores no reproducirá el error.
Archivos de ejecución
Los archivos de ejecución son un conjunto de archivos que usa un destino en el tiempo de ejecución (a diferencia del tiempo de compilación). Durante la fase de ejecución, Bazel crea un árbol de directorios que contiene symlinks que apuntan a los runfiles. Esto prepara el entorno para el binario para que pueda acceder a los archivos de ejecución durante el tiempo de ejecución.
Los archivos de ejecución se pueden agregar de forma manual durante la creación de reglas.
El método runfiles
puede crear objetos runfiles
en el contexto de la regla, ctx.runfiles
, y pasarlos al parámetro runfiles
en DefaultInfo
. El resultado ejecutable de las reglas ejecutables se agrega de forma implícita a los archivos de ejecución.
Algunas reglas especifican atributos, generalmente llamados data
, cuyos resultados se agregan a los archivos de ejecución de un destino. Los archivos de ejecución también deben combinarse desde data
, así como desde cualquier atributo que pueda proporcionar código para una ejecución eventual, por lo general, srcs
(que puede contener objetivos filegroup
con data
asociados) y deps
.
def _example_library_impl(ctx):
...
runfiles = ctx.runfiles(files = ctx.files.data)
transitive_runfiles = []
for runfiles_attr in (
ctx.attr.srcs,
ctx.attr.hdrs,
ctx.attr.deps,
ctx.attr.data,
):
for target in runfiles_attr:
transitive_runfiles.append(target[DefaultInfo].default_runfiles)
runfiles = runfiles.merge_all(transitive_runfiles)
return [
DefaultInfo(..., runfiles = runfiles),
...
]
Proveedores personalizados
Los proveedores se pueden definir con la función provider
para transmitir información específica de la regla:
ExampleInfo = provider(
"Info needed to compile/link Example code.",
fields = {
"headers": "depset of header Files from transitive dependencies.",
"files_to_link": "depset of Files from compilation.",
},
)
Las funciones de implementación de reglas pueden crear y mostrar instancias de proveedores:
def _example_library_impl(ctx):
...
return [
...
ExampleInfo(
headers = headers,
files_to_link = depset(
[output_file],
transitive = [
dep[ExampleInfo].files_to_link for dep in ctx.attr.deps
],
),
)
]
Inicialización personalizada de proveedores
Es posible proteger la creación de instancias de un proveedor con una lógica de validación y procesamiento previo personalizada. Esto se puede usar para garantizar que todas las instancias del proveedor satisfagan ciertas invarianzas o para brindarles a los usuarios una API más clara para obtener una instancia.
Para ello, se pasa una devolución de llamada init
a la función provider
. Si se proporciona esta devolución de llamada, el tipo devuelto de provider()
cambia a una tupla de dos valores: el símbolo del proveedor que es el valor que se muestra de forma ordinaria cuando no se usa init
y un "constructor sin procesar".
En este caso, cuando se llame al símbolo del proveedor, en lugar de mostrar directamente una instancia nueva, reenviará los argumentos a la devolución de llamada init
. El valor que muestra la devolución de llamada debe ser un diccionario que asigne nombres de campos (cadenas) a valores. Esto se usa para inicializar los campos de la instancia nueva. Ten en cuenta que la devolución de llamada puede tener cualquier firma y, si los argumentos no coinciden con la firma, se informa un error como si se hubiera invocado la devolución de llamada directamente.
Por el contrario, el constructor sin procesar omitirá la devolución de llamada init
.
En el siguiente ejemplo, se usa init
para procesar previamente y validar sus argumentos:
# //pkg:exampleinfo.bzl
_core_headers = [...] # private constant representing standard library files
# Keyword-only arguments are preferred.
def _exampleinfo_init(*, files_to_link, headers = None, allow_empty_files_to_link = False):
if not files_to_link and not allow_empty_files_to_link:
fail("files_to_link may not be empty")
all_headers = depset(_core_headers, transitive = headers)
return {"files_to_link": files_to_link, "headers": all_headers}
ExampleInfo, _new_exampleinfo = provider(
fields = ["files_to_link", "headers"],
init = _exampleinfo_init,
)
Una implementación de reglas puede crear una instancia del proveedor de la siguiente manera:
ExampleInfo(
files_to_link = my_files_to_link, # may not be empty
headers = my_headers, # will automatically include the core headers
)
El constructor sin procesar se puede usar para definir funciones de fábrica públicas alternativas que no pasan por la lógica de init
. Por ejemplo, exampleinfo.bzl podría definir lo siguiente:
def make_barebones_exampleinfo(headers):
"""Returns an ExampleInfo with no files_to_link and only the specified headers."""
return _new_exampleinfo(files_to_link = depset(), headers = all_headers)
Por lo general, el constructor sin procesar está vinculado a una variable cuyo nombre comienza con un guion bajo (_new_exampleinfo
arriba), para que el código de usuario no pueda cargarlo y generar instancias arbitrarias de proveedores.
Otro uso de init
es evitar que el usuario llame por completo al símbolo del proveedor y forzarlo a usar una función de fábrica:
def _exampleinfo_init_banned(*args, **kwargs):
fail("Do not call ExampleInfo(). Use make_exampleinfo() instead.")
ExampleInfo, _new_exampleinfo = provider(
...
init = _exampleinfo_init_banned)
def make_exampleinfo(...):
...
return _new_exampleinfo(...)
Reglas ejecutables y reglas de prueba
Las reglas ejecutables definen destinos que pueden invocarse mediante un comando bazel run
.
Las reglas de prueba son un tipo especial de regla ejecutable cuyos destinos también se pueden invocar con un comando bazel test
. Para crear reglas ejecutables y de prueba, configura el argumento executable
o test
correspondiente en True
en la llamada a rule
:
example_binary = rule(
implementation = _example_binary_impl,
executable = True,
...
)
example_test = rule(
implementation = _example_binary_impl,
test = True,
...
)
Las reglas de prueba deben tener nombres que terminen en _test
. (Por convención, los nombres de destino de prueba también suelen terminar en _test
, pero esto no es obligatorio). Las reglas que no son de prueba no deben tener este sufijo.
Ambos tipos de reglas deben producir un archivo de salida ejecutable (que puede o no estar declarado previamente) que se invocará mediante los comandos run
o test
. Para indicarle a Bazel cuál de los resultados de una regla debe usar como este ejecutable, pásalo como el argumento executable
de un proveedor DefaultInfo
que se muestra. Ese executable
se agrega a los resultados predeterminados de la regla (por lo que no es necesario pasarlo a executable
ni a files
). También se agrega de forma implícita a los runfiles:
def _example_binary_impl(ctx):
executable = ctx.actions.declare_file(ctx.label.name)
...
return [
DefaultInfo(executable = executable, ...),
...
]
La acción que genera este archivo debe establecer el bit ejecutable en el archivo. En el caso de las acciones ctx.actions.run
o ctx.actions.run_shell
, la herramienta subyacente debe invocar la acción. Para una acción ctx.actions.write
, pasa is_executable = True
.
Como comportamiento heredado, las reglas ejecutables tienen un resultado ctx.outputs.executable
especial declarado previamente. Este archivo funciona como el ejecutable predeterminado si no especificas uno con DefaultInfo
. No se debe usar de otra manera. Este mecanismo de salida dejó de estar disponible porque no admite la personalización del nombre del archivo ejecutable en el momento del análisis.
Consulta ejemplos de una regla ejecutable y una regla de prueba.
Las reglas ejecutables y las reglas de prueba tienen atributos adicionales definidos de forma implícita, además de los que se agregan para todas las reglas. No se pueden cambiar los valores predeterminados de los atributos agregados de forma implícita, aunque se puede solucionar el problema uniendo una regla privada en una macro de Starlark que altere el valor predeterminado:
def example_test(size = "small", **kwargs):
_example_test(size = size, **kwargs)
_example_test = rule(
...
)
Ubicación de los archivos de ejecución
Cuando se ejecuta un destino ejecutable con bazel run
(o test
), la raíz del directorio de archivos de ejecución se encuentra junto al ejecutable. Las rutas se relacionan de la siguiente manera:
# Given launcher_path and runfile_file:
runfiles_root = launcher_path.path + ".runfiles"
workspace_name = ctx.workspace_name
runfile_path = runfile_file.short_path
execution_root_relative_path = "%s/%s/%s" % (
runfiles_root, workspace_name, runfile_path)
La ruta de acceso a un File
en el directorio runfiles corresponde a File.short_path
.
El objeto binario que ejecuta directamente bazel
está junto a la raíz del directorio runfiles
. Sin embargo, los objetos binarios llamados desde los archivos de ejecución no pueden hacer la misma suposición. Para mitigar este problema, cada objeto binario debe proporcionar una forma de aceptar su raíz de archivos de ejecución como un parámetro mediante un entorno, un argumento o una marca de la línea de comandos. Esto permite que los objetos binarios pasen la raíz correcta de los archivos de ejecución canónicos a los objetos binarios a los que llama. Si no se establece, un objeto binario puede adivinar que fue el primero al que se llamó y buscar un directorio de archivos de ejecución adyacente.
Temas avanzados
Cómo solicitar archivos de salida
Un solo objetivo puede tener varios archivos de salida. Cuando se ejecuta un comando bazel build
, algunos de los resultados de los destinos que se le proporcionan se consideran solicitados. Bazel solo compila estos archivos solicitados y los archivos de los que dependen directa o indirectamente. (En términos del gráfico de acciones, Bazel solo ejecuta las acciones a las que se puede acceder como dependencias transitivas de los archivos solicitados).
Además de los resultados predeterminados, cualquier resultado declarado previamente se puede solicitar de forma explícita en la línea de comandos. Las reglas pueden especificar salidas declaradas previamente
mediante atributos de salida. En ese caso, el usuario elige explícitamente las etiquetas para las salidas cuando crea una instancia de la regla. Para obtener objetos File
para los atributos de salida, usa el atributo correspondiente de ctx.outputs
. Las reglas también pueden definir implícitamente salidas declaradas previamente en función del nombre de destino, pero esta función dejó de estar disponible.
Además de los resultados predeterminados, existen grupos de resultados, que son colecciones de archivos de salida que se pueden solicitar juntos. Se pueden solicitar con --output_groups
. Por ejemplo, si un //pkg:mytarget
de destino es de un tipo de regla que tiene un grupo de salida debug_files
, se pueden compilar estos archivos ejecutando bazel build //pkg:mytarget
--output_groups=debug_files
. Dado que los resultados no declarados previamente no tienen etiquetas, solo se pueden solicitar si aparecen en los resultados predeterminados o en un grupo de resultados.
Los grupos de salida se pueden especificar con el proveedor OutputGroupInfo
. Ten en cuenta que, a diferencia de muchos proveedores integrados, OutputGroupInfo
puede aceptar parámetros con nombres arbitrarios para definir grupos de salida con ese nombre:
def _example_library_impl(ctx):
...
debug_file = ctx.actions.declare_file(name + ".pdb")
...
return [
DefaultInfo(files = depset([output_file]), ...),
OutputGroupInfo(
debug_files = depset([debug_file]),
all_files = depset([output_file, debug_file]),
),
...
]
Además, a diferencia de la mayoría de los proveedores, OutputGroupInfo
puede mostrarse tanto por un
aspecto como por el objetivo de la regla al que se aplica ese aspecto, siempre
que no definan los mismos grupos de salida. En ese caso, se combinan los proveedores resultantes.
Ten en cuenta que, por lo general, OutputGroupInfo
no debe usarse para transmitir tipos específicos de archivos de un destino a las acciones de sus consumidores. En su lugar, define proveedores específicos de la regla.
Configuraciones
Imagina que quieres compilar un objeto binario de C++ para una arquitectura diferente. La compilación puede ser compleja y requerir varios pasos. Algunos de los objetos binarios intermedios, como los compiladores y los generadores de código, deben ejecutarse en la plataforma de ejecución (que podría ser tu host o un ejecutor remoto). Algunos objetos binarios, como el resultado final, deben compilarse para la arquitectura de destino.
Por esta razón, Bazel tiene un concepto de "configuraciones" y transiciones. Los objetivos más altos (los que se solicitan en la línea de comandos) están integrados en la configuración "target", mientras que las herramientas que se deben ejecutar en la plataforma de ejecución están integradas en una configuración "exec". Las reglas pueden generar diferentes acciones según la configuración, por ejemplo, para cambiar la arquitectura de la CPU que se pasa al compilador. En algunos casos, es posible que se necesite la misma biblioteca para diferentes configuraciones. Si esto sucede, se analizará y, posiblemente, se compilará varias veces.
De forma predeterminada, Bazel compila las dependencias de un destino en la misma configuración que el destino en sí, es decir, sin transiciones. Cuando una dependencia es una herramienta necesaria para ayudar a compilar el destino, el atributo correspondiente debe especificar una transición a una configuración de ejecución. Esto hace que la herramienta y todas sus dependencias se compilen para la plataforma de ejecución.
Para cada atributo de dependencia, puedes usar cfg
para decidir si las dependencias deben compilarse en la misma configuración o migrar a una configuración de ejecución.
Si un atributo de dependencia tiene la marca executable = True
, cfg
debe configurarse explícitamente. Esto es para evitar compilar accidentalmente una herramienta con la configuración incorrecta.
Ver ejemplo
En general, las fuentes, las bibliotecas dependientes y los ejecutables que se necesitarán en el tiempo de ejecución pueden usar la misma configuración.
Las herramientas que se ejecutan como parte de la compilación (como los compiladores o los generadores de código) deben compilarse para una configuración de ejecución. En este caso, especifica cfg = "exec"
en el atributo.
De lo contrario, los ejecutables que se usan en el tiempo de ejecución (como parte de una prueba) deben compilarse para la configuración de destino. En este caso, especifica cfg = "target"
en el atributo.
En realidad, cfg = "target"
no hace nada: solo es un valor de conveniencia para ayudar a los diseñadores de reglas a ser explícitos sobre sus intenciones. Cuando executable = False
, lo que significa que cfg
es opcional, solo configúralo cuando realmente ayude a la legibilidad.
También puedes usar cfg = my_transition
para usar transiciones definidas por el usuario, que les brindan a los autores de reglas una gran flexibilidad para cambiar la configuración, con la desventaja de hacer que el gráfico de compilación sea más grande y menos comprensible.
Nota: Antes, Bazel no tenía el concepto de plataformas de ejecución y, en su lugar, se consideraba que todas las acciones de compilación se ejecutaban en la máquina anfitrión. Las versiones de Bazel anteriores a la 6.0 creaban una configuración de "host" distinta para representar esto. Si ves referencias a "host" en el código o en la documentación anterior, a eso se refiere. Te recomendamos que uses Bazel 6.0 o versiones posteriores para evitar esta sobrecarga conceptual adicional.
Fragmentos de configuración
Las reglas pueden acceder a fragmentos de configuración, como cpp
y java
. Sin embargo, todos los fragmentos obligatorios deben declararse para evitar errores de acceso:
def _impl(ctx):
# Using ctx.fragments.cpp leads to an error since it was not declared.
x = ctx.fragments.java
...
my_rule = rule(
implementation = _impl,
fragments = ["java"], # Required fragments of the target configuration
...
)
Vínculos simbólicos de archivos de ejecución
Por lo general, la ruta de acceso relativa de un archivo en el árbol de archivos de ejecución es la misma que la ruta de acceso relativa de ese archivo en el árbol de fuentes o en el árbol de salida generado. Si por algún motivo deben ser diferentes, puedes especificar los argumentos root_symlinks
o symlinks
. root_symlinks
es un diccionario que asigna rutas de acceso a archivos, en las que las rutas de acceso son relativas a la raíz del directorio de runfiles. El diccionario symlinks
es el mismo, pero las rutas de acceso tienen un prefijo implícito con el nombre del espacio de trabajo principal (no el nombre del repositorio que contiene el destino actual).
...
runfiles = ctx.runfiles(
root_symlinks = {"some/path/here.foo": ctx.file.some_data_file2}
symlinks = {"some/path/here.bar": ctx.file.some_data_file3}
)
# Creates something like:
# sometarget.runfiles/
# some/
# path/
# here.foo -> some_data_file2
# <workspace_name>/
# some/
# path/
# here.bar -> some_data_file3
Si se usa symlinks
o root_symlinks
, ten cuidado de no asignar dos archivos diferentes
a la misma ruta de acceso en el árbol de runfiles. Esto hará que la compilación falle con un error que describe el conflicto. Para solucionarlo, debes modificar los argumentos ctx.runfiles
para quitar la colisión. Esta verificación se realizará para cualquier objetivo que use tu regla, así como para objetivos de cualquier tipo que dependan de esos objetivos. Esto es especialmente riesgoso si es probable que otra herramienta use tu herramienta de forma transitiva. Los nombres de symlinks deben ser únicos en los archivos de ejecución de una herramienta y todas sus dependencias.
Cobertura de código
Cuando se ejecuta el comando coverage
, es posible que la compilación deba agregar instrumentación de cobertura para ciertos destinos. La compilación también recopila la lista de archivos de origen que se instrumentan. El subconjunto de objetivos que se consideran se controla con la marca --instrumentation_filter
.
Se excluyen los destinos de prueba, a menos que se especifique --instrument_test_targets
.
Si una implementación de reglas agrega instrumentación de cobertura en el tiempo de compilación, debe tener en cuenta eso en su función de implementación. ctx.coverage_instrumented muestra True
en el modo de cobertura si las fuentes de un destino deben instrumentarse:
# Are this rule's sources instrumented?
if ctx.coverage_instrumented():
# Do something to turn on coverage for this compile action
La lógica que siempre debe estar activada en el modo de cobertura (ya sea que las fuentes de un objetivo se instrumenten de forma específica o no) se puede condicionar en ctx.configuration.coverage_enabled.
Si la regla incluye directamente fuentes de sus dependencias antes de la compilación (como archivos de encabezado), es posible que también deba activar la instrumentación en el tiempo de compilación si las fuentes de las dependencias deben instrumentarse:
# Are this rule's sources or any of the sources for its direct dependencies
# in deps instrumented?
if (ctx.configuration.coverage_enabled and
(ctx.coverage_instrumented() or
any([ctx.coverage_instrumented(dep) for dep in ctx.attr.deps]))):
# Do something to turn on coverage for this compile action
Las reglas también deben proporcionar información sobre qué atributos son relevantes para la cobertura con el proveedor InstrumentedFilesInfo
, que se construye con coverage_common.instrumented_files_info
.
El parámetro dependency_attributes
de instrumented_files_info
debe enumerar todos los atributos de dependencia del entorno de ejecución, incluidas las dependencias de código como deps
y las dependencias de datos como data
. El parámetro source_attributes
debe enumerar los atributos de los archivos de origen de la regla si se puede agregar instrumentación de cobertura:
def _example_library_impl(ctx):
...
return [
...
coverage_common.instrumented_files_info(
ctx,
dependency_attributes = ["deps", "data"],
# Omitted if coverage is not supported for this rule:
source_attributes = ["srcs", "hdrs"],
)
...
]
Si no se muestra InstrumentedFilesInfo
, se crea uno predeterminado con cada atributo de dependencia que no sea de herramienta que no establezca cfg
en "exec"
en el esquema de atributos en dependency_attributes
. (Este comportamiento no es ideal, ya que coloca atributos como srcs
en dependency_attributes
en lugar de source_attributes
, pero evita la necesidad de una configuración de cobertura explícita para todas las reglas de la cadena de dependencias).
Acciones de validación
A veces, debes validar algo sobre la compilación, y la información necesaria para realizar esa validación solo está disponible en artefactos (archivos fuente o archivos generados). Debido a que esta información se encuentra en artefactos, las reglas no pueden realizar esta validación en el momento del análisis porque no pueden leer archivos. En cambio, las acciones deben hacer esta validación en el momento de la ejecución. Cuando la validación falle, la acción fallará y, por lo tanto, también lo hará la compilación.
Algunos ejemplos de validaciones que se pueden ejecutar son el análisis estático, el análisis con lint, las verificaciones de dependencia y coherencia, y las verificaciones de estilo.
Las acciones de validación también pueden ayudar a mejorar el rendimiento de la compilación, ya que mueven partes de acciones que no son necesarias para compilar artefactos en acciones separadas. Por ejemplo, si una sola acción que realiza la compilación y la lint se puede separar en una acción de compilación y una acción de lint, la acción de lint se puede ejecutar como una acción de validación y en paralelo con otras acciones.
Estas "acciones de validación" a menudo no producen nada que se use en otra parte de la compilación, ya que solo necesitan realizar aserciones sobre sus entradas. Sin embargo, esto presenta un problema: si una acción de validación no produce nada que se use en otro lugar de la compilación, ¿cómo hace una regla para que se ejecute la acción? Históricamente, el enfoque consistía en hacer que la acción de validación generara un archivo vacío y agregar de forma artificial ese resultado a las entradas de alguna otra acción importante en la compilación:
Esto funciona, ya que Bazel siempre ejecutará la acción de validación cuando se ejecute la acción de compilación, pero esto tiene desventajas importantes:
La acción de validación está en la ruta crítica de la compilación. Como Bazel piensa que el resultado vacío es necesario para ejecutar la acción de compilación, primero ejecutará la acción de validación, aunque la acción de compilación ignorará la entrada. Esto reduce el paralelismo y ralentiza las compilaciones.
Si es posible que se ejecuten otras acciones en la compilación en lugar de la acción de compilación, también se deben agregar a esas acciones los resultados vacíos de las acciones de validación (por ejemplo, el resultado del jar de origen de
java_library
). Esto también es un problema si, más adelante, se agregan acciones nuevas que podrían ejecutarse en lugar de la acción de compilación y se deja accidentalmente el resultado de validación vacío.
La solución a estos problemas es usar el grupo de resultados de validaciones.
Grupo de resultados de validaciones
El grupo de salida de validaciones es un grupo de salida diseñado para contener las salidas de las acciones de validación que no se usarían, de modo que no sea necesario agregarlas de forma artificial a las entradas de otras acciones.
Este grupo es especial porque sus salidas siempre se solicitan, sin importar el valor de la marca --output_groups
ni de cómo se depende el destino (por ejemplo, en la línea de comandos, como una dependencia o a través de resultados implícitos del objetivo). Ten en cuenta que aún se aplican la incremencialidad y el almacenamiento en caché normales: si las entradas de la acción de validación no cambiaron y la acción de validación se realizó correctamente anteriormente, no se ejecutará.
El uso de este grupo de salida aún requiere que las acciones de validación generen algún archivo, incluso uno vacío. Esto puede requerir unir algunas herramientas que, por lo general, no crean resultados para que se cree un archivo.
Las acciones de validación de un objetivo no se ejecutan en tres casos:
- Cuando se depende del destino como herramienta
- Cuando se depende del objetivo como una dependencia implícita (por ejemplo, un atributo que comienza con “_”)
- Cuando el destino se compila en la configuración de ejecución.
Se supone que estos destinos tienen sus propias compilaciones y pruebas independientes que descubrirían cualquier error de validación.
Cómo usar el grupo de salida de validaciones
El grupo de salida de validaciones se llama _validation
y se usa como cualquier otro grupo de salida:
def _rule_with_validation_impl(ctx):
ctx.actions.write(ctx.outputs.main, "main output\n")
ctx.actions.write(ctx.outputs.implicit, "implicit output\n")
validation_output = ctx.actions.declare_file(ctx.attr.name + ".validation")
ctx.actions.run(
outputs = [validation_output],
executable = ctx.executable._validation_tool,
arguments = [validation_output.path],
)
return [
DefaultInfo(files = depset([ctx.outputs.main])),
OutputGroupInfo(_validation = depset([validation_output])),
]
rule_with_validation = rule(
implementation = _rule_with_validation_impl,
outputs = {
"main": "%{name}.main",
"implicit": "%{name}.implicit",
},
attrs = {
"_validation_tool": attr.label(
default = Label("//validation_actions:validation_tool"),
executable = True,
cfg = "exec"
),
}
)
Ten en cuenta que el archivo de salida de validación no se agrega a DefaultInfo
ni a las entradas de ninguna otra acción. La acción de validación para un destino de este tipo de regla se ejecutará de todos modos si el destino depende de la etiqueta o si se depende directamente o indirectamente de cualquiera de sus resultados implícitos.
Por lo general, es importante que los resultados de las acciones de validación solo vayan al grupo de salida de validación y no se agreguen a las entradas de otras acciones, ya que esto podría acabar con las ganancias del paralelismo. Sin embargo, ten en cuenta que Bazel no tiene ninguna verificación especial para aplicar esta regla. Por lo tanto, debes probar que las salidas de las acciones de validación no se agreguen a las entradas de ninguna acción en las pruebas de las reglas de Starlark. Por ejemplo:
load("@bazel_skylib//lib:unittest.bzl", "analysistest")
def _validation_outputs_test_impl(ctx):
env = analysistest.begin(ctx)
actions = analysistest.target_actions(env)
target = analysistest.target_under_test(env)
validation_outputs = target.output_groups._validation.to_list()
for action in actions:
for validation_output in validation_outputs:
if validation_output in action.inputs.to_list():
analysistest.fail(env,
"%s is a validation action output, but is an input to action %s" % (
validation_output, action))
return analysistest.end(env)
validation_outputs_test = analysistest.make(_validation_outputs_test_impl)
Marca de acciones de validación
La ejecución de acciones de validación está controlada por la marca de línea de comandos --run_validations
, que se establece de forma predeterminada en verdadero.
Funciones obsoletas
Salidas predeclaradas obsoletas
Existen dos formas obsoletas de usar salidas declaradas previamente:
El parámetro
outputs
derule
especifica una asignación entre los nombres de atributos de salida y las plantillas de cadenas para generar etiquetas de salida declaradas previamente. Prefiere usar salidas no declaradas previamente y agregar salidas de forma explícita aDefaultInfo.files
. Usa la etiqueta del objetivo de la regla como entrada para las reglas que consumen la salida en lugar de la etiqueta de una salida predeclarada.En el caso de las reglas ejecutables,
ctx.outputs.executable
hace referencia a un resultado ejecutable declarado previamente con el mismo nombre que el objetivo de la regla. Es preferible declarar el resultado de manera explícita, por ejemplo, conctx.actions.declare_file(ctx.label.name)
, y asegúrate de que el comando que genera el ejecutable establezca sus permisos para permitir la ejecución. Pasa de forma explícita el resultado ejecutable al parámetroexecutable
deDefaultInfo
.
Funciones de Runfiles que se deben evitar
ctx.runfiles
y el tipo runfiles
tienen un conjunto complejo de atributos, muchos de los cuales se conservan por motivos heredados.
Las siguientes recomendaciones ayudan a reducir la complejidad:
Evita el uso de los modos
collect_data
ycollect_default
dectx.runfiles
. Estos modos recopilan implícitamente archivos de ejecución en ciertos bordes de dependencia codificados de forma incomprensible. En su lugar, agrega archivos con los parámetrosfiles
otransitive_files
dectx.runfiles
, o combínalos en runfiles desde dependencias conrunfiles = runfiles.merge(dep[DefaultInfo].default_runfiles)
.Evita el uso de
data_runfiles
ydefault_runfiles
del constructorDefaultInfo
. EspecificaDefaultInfo(runfiles = ...)
en su lugar. La distinción entre runfiles "predeterminados" y "datos" se mantiene por motivos heredados. Por ejemplo, algunas reglas colocan sus resultados predeterminados endata_runfiles
, pero no endefault_runfiles
. En lugar de usardata_runfiles
, las reglas deben incluir salidas predeterminadas y combinarse endefault_runfiles
a partir de atributos que proporcionan archivos de ejecución (a menudo,data
).Cuando recuperes
runfiles
deDefaultInfo
(por lo general, solo para combinar archivos de ejecución entre la regla actual y sus dependencias), usaDefaultInfo.default_runfiles
, noDefaultInfo.data_runfiles
.
Cómo migrar desde proveedores heredados
Históricamente, los proveedores de Bazel eran campos simples en el objeto Target
. Se accedía a ellos con el operador de punto y se creaban colocando el campo en un struct
que devolvía la función de implementación de la regla en lugar de una lista de objetos de proveedor:
return struct(example_info = struct(headers = depset(...)))
Estos proveedores se pueden recuperar desde el campo correspondiente del objeto Target
:
transitive_headers = [hdr.example_info.headers for hdr in ctx.attr.hdrs]
Este estilo dejó de estar disponible y no se debe usar en código nuevo. Consulta la siguiente información para obtener detalles que te ayuden a realizar la migración. El nuevo mecanismo de proveedores evita los conflictos de nombres. También admite el ocultamiento de datos, ya que requiere que cualquier código que acceda a una instancia del proveedor lo recupere con el símbolo del proveedor.
Por el momento, se siguen admitiendo los proveedores heredados. Una regla puede mostrar proveedores heredados y modernos de la siguiente manera:
def _old_rule_impl(ctx):
...
legacy_data = struct(x = "foo", ...)
modern_data = MyInfo(y = "bar", ...)
# When any legacy providers are returned, the top-level returned value is a
# struct.
return struct(
# One key = value entry for each legacy provider.
legacy_info = legacy_data,
...
# Additional modern providers:
providers = [modern_data, ...])
Si dep
es el objeto Target
resultante de una instancia de esta regla, los proveedores y su contenido se pueden recuperar como dep.legacy_info.x
y dep[MyInfo].y
.
Además de providers
, la estructura que se muestra también puede tomar varios otros campos que tienen un significado especial (y, por lo tanto, no crean un proveedor heredado correspondiente):
Los campos
files
,runfiles
,data_runfiles
,default_runfiles
yexecutable
corresponden a los campos con el mismo nombre deDefaultInfo
. No se permite especificar ninguno de estos campos y, al mismo tiempo, mostrar un proveedor deDefaultInfo
.El campo
output_groups
toma un valor de struct y corresponde a unOutputGroupInfo
.
En las declaraciones de reglas de provides
y en las declaraciones de atributos de dependencia de providers
, los proveedores heredados se pasan como cadenas y los proveedores modernos se pasan con su símbolo Info
. Asegúrate de cambiar de cadenas a símbolos durante la migración. En el caso de los conjuntos de reglas complejos o grandes en los que es difícil actualizar todas las reglas de forma atómica, es posible que te resulte más fácil si sigues esta secuencia de pasos:
Modifica las reglas que producen el proveedor heredado para producir los proveedores tradicionales y modernos con la sintaxis anterior. En el caso de las reglas que declaran que muestran el proveedor heredado, actualiza esa declaración para incluir los proveedores heredados y modernos.
Modifica las reglas que consumen el proveedor heredado para que consuman el proveedor moderno. Si alguna declaración de atributo requiere el proveedor heredado, también actualízala para que requiera el proveedor moderno. De manera opcional, puedes intercalar este trabajo con el paso 1 haciendo que los consumidores acepten o requieran cualquiera de los proveedores: prueba la presencia del proveedor heredado con
hasattr(target, 'foo')
o del proveedor nuevo conFooInfo in target
.Quita por completo el proveedor heredado de todas las reglas.