This commit is contained in:
Anna Scholtz 2020-06-25 12:44:37 -07:00
Родитель c5d727c336
Коммит 4d85266015
5 изменённых файлов: 5 добавлений и 7 удалений

Просмотреть файл

@ -263,9 +263,7 @@ class Task:
# the order of table dependencies changes between requests
# sort to maintain same order between DAG generation runs
sorted_table_names = list(table_names)
sorted_table_names.sort()
return sorted_table_names
return sorted(table_names)
def with_dependencies(self, client, dag_collection):
"""Perfom a dry_run to get upstream dependencies."""

Просмотреть файл

@ -143,7 +143,7 @@ bqetl_main_summary:
retries: 2
retry_delay: 30m
bqetl_experiments:
bqetl_experiments_daily:
schedule_interval: 0 1 * * *
default_args:
owner: ssuh@mozilla.com

Просмотреть файл

@ -17,7 +17,7 @@ default_args = {
}
with DAG(
"bqetl_experiments", default_args=default_args, schedule_interval="0 1 * * *"
"bqetl_experiments_daily", default_args=default_args, schedule_interval="0 1 * * *"
) as dag:
telemetry_derived__experiments_daily_active_clients__v1 = bigquery_etl_query(

Просмотреть файл

@ -7,4 +7,4 @@ labels:
application: experiments
schedule: daily
scheduling:
dag_name: bqetl_experiments
dag_name: bqetl_experiments_daily

Просмотреть файл

@ -415,7 +415,7 @@ class TestTask:
assert f"{temporary_dataset}__table2__v1" in tables
@pytest.mark.integration
def test_muultipart_task_get_dependencies(
def test_multipart_task_get_dependencies(
self, tmp_path, bigquery_client, project_id, temporary_dataset
):
query_file_path = tmp_path / "sql" / temporary_dataset / "query_v1"