PowerShell і BITS: ефективне копіювання та завантаження великих файлів

Вступ

Передавання великих файлів є одним із найпоширеніших завдань у роботі системних адміністраторів, DevOps-інженерів, фахівців технічної підтримки та розробників. Резервні копії, ISO-образи операційних систем, віртуальні машини, архіви логів або дистрибутиви програмного забезпечення можуть досягати десятків і навіть сотень гігабайтів.

Традиційні інструменти, такі як Copy-Item, xcopy, robocopy або звичайні HTTP-завантажувачі, не завжди забезпечують достатню надійність при роботі через нестабільні мережі. Переривання з'єднання, втрата живлення або перезапуск системи часто призводять до необхідності починати передачу даних заново.

Саме для таких сценаріїв у Windows існує служба BITS (Background Intelligent Transfer Service). Вона дозволяє виконувати фонове копіювання та завантаження файлів із підтримкою автоматичного відновлення передачі після розриву з'єднання, контролем використання пропускної здатності та інтеграцією з PowerShell.

У цій статті розглянемо принцип роботи BITS, його переваги, практичні приклади використання в PowerShell та сценарії автоматизації для корпоративних середовищ.

Що таке BITS

Background Intelligent Transfer Service (BITS) - це системна служба Windows, яка забезпечує асинхронне передавання файлів між клієнтом і сервером.

Служба вперше з'явилася ще в Windows XP та активно використовується багатьма компонентами Microsoft:

• Windows Update;
• Microsoft Endpoint Configuration Manager;
• Microsoft Store;
• Microsoft Defender;
• різними корпоративними агентами оновлень.

Головна особливість BITS полягає в тому, що вона працює у фоновому режимі та автоматично адаптується до навантаження мережі.

На відміну від звичайного HTTP-завантаження, BITS може:

• продовжувати передачу після обриву зв'язку;
• використовувати вільну пропускну здатність каналу;
• працювати після виходу користувача із системи;
• відновлювати завдання після перезавантаження;
• виконувати передачу у фоновому режимі без впливу на продуктивність користувача.

Як працює BITS

При запуску завдання BITS створює спеціальну чергу передачі.

У цій черзі зберігається інформація про:

• джерело файлу;
• місце призначення;
• поточний прогрес;
• стан передачі;
• параметри автентифікації.

Якщо мережеве з'єднання тимчасово зникає, служба не завершує завдання помилкою. Вона просто переходить у стан очікування та автоматично продовжує передачу після відновлення доступності ресурсу.

Схематично процес виглядає так:

PowerShell      
	|      
	v  
BITS Service      
	|      
	v 
Черга передач      
	|      
	+---- HTTP      
	+---- HTTPS      
	+---- SMB      
	|      
	v 
Отримання файлу

Завдяки цьому BITS особливо ефективний для нестабільних VPN-каналів та віддалених філій.

Модуль BitsTransfer у PowerShell

PowerShell містить вбудований модуль BitsTransfer, який надає командлети для керування службою BITS.

Основні командлети:

Перевірити наявність модуля можна так:

Get-Module -ListAvailable BitsTransfer

Імпортувати модуль:

Import-Module BitsTransfer

Найпростіше завантаження великого файлу

Базовий приклад:

Start-BitsTransfer `
    -Source "https://downloads.example.com/windows.iso" `
    -Destination "D:\ISO\windows.iso"

Після запуску команда повернеться лише після завершення передачі.

Це найпростіший спосіб завантаження файлу через BITS.

Асинхронне завантаження

У багатьох випадках адміністратору не потрібно чекати завершення операції.

Для цього використовується параметр -Asynchronous.

$job = Start-BitsTransfer `
    -Source "https://downloads.example.com/backup.zip" `
    -Destination "D:\Backup\backup.zip" `
    -Asynchronous

Перевірити стан:

Get-BitsTransfer

Результат може виглядати так:

JobId                                 DisplayName
-----                                 -----------
8e8c8f44-1234-5678-abcd-987654321000  BITS Transfer

Отримати детальну інформацію:

Get-BitsTransfer | Format-List *

Контроль прогресу передачі

Для моніторингу завантаження можна використовувати цикл.

$job = Start-BitsTransfer `
    -Source "https://downloads.example.com/bigfile.iso" `
    -Destination "D:\Downloads\bigfile.iso" `
    -Asynchronous
    
    while ($job.JobState -eq "Transferring"){
        $job = Get-BitsTransfer -JobId $job.JobId
        Write-Host "Передано: $($job.BytesTransferred)"
        Start-Sleep 5
    }

Такий підхід часто використовується в корпоративних сценаріях автоматизації.

Завантаження декількох файлів

BITS підтримує пакетну передачу.

$files = @(
    "https://server.local/file1.zip",
    "https://server.local/file2.zip",    
    "https://server.local/file3.zip"
    )
    
foreach ($file in $files){    
		Start-BitsTransfer `
        -Source $file `
        -Destination "D:\Downloads"
        }

Для великої кількості файлів це значно надійніше за використання циклів із Invoke-WebRequest.

Призупинення та відновлення передачі

Однією з ключових переваг BITS є можливість тимчасово зупиняти передачу.

Призупинення:

Get-BitsTransfer | Suspend-BitsTransfer

Відновлення:

Get-BitsTransfer | Resume-BitsTransfer

Це особливо корисно під час обслуговування мережевої інфраструктури.

Видалення завислих завдань

Іноді завдання можуть переходити в помилковий стан.

Перегляд усіх завдань:

Get-BitsTransfer -AllUsers

Видалення:

Get-BitsTransfer -AllUsers |Remove-BitsTransfer

Або конкретного завдання:

Get-BitsTransfer -JobId $JobId |Remove-BitsTransfer

Завантаження через автентифікацію

У корпоративних мережах часто використовуються захищені ресурси.

BITS підтримує передачу облікових даних.

$cred = Get-Credential

Start-BitsTransfer `
    -Source "https://repo.company.local/build.zip" `
    -Destination "D:\Builds\build.zip" `
    -Credential $cred

Цей механізм дозволяє працювати з внутрішніми репозиторіями та файловими порталами.

Порівняння BITS та Invoke-WebRequest

Багато адміністраторів використовують Invoke-WebRequest для завантаження файлів.

Розглянемо відмінності.

Для файлів обсягом декілька мегабайт різниця майже непомітна.

Для образів у десятки гігабайтів перевага BITS стає очевидною.

Копіювання файлів через SMB

BITS може працювати не лише через HTTP або HTTPS.

Приклад копіювання з мережевого ресурсу:

Start-BitsTransfer `
    -Source "\\fileserver\backup\backup.vhdx" `
    -Destination "D:\Backup\backup.vhdx"

У випадку мережевих збоїв передача буде автоматично відновлена.

Для резервних копій це значно надійніше за звичайний Copy-Item.

Практичний кейс: завантаження ISO-образів у філіях

Уявімо компанію з десятками віддалених офісів.

Необхідно доставити новий ISO-образ Windows розміром 8–10 ГБ до кожного офісу.

Використання звичайного копіювання може призвести до:

• перевантаження WAN-каналу;
• повторних завантажень після обривів;
• збільшення навантаження на сервер.

BITS вирішує проблему:

Start-BitsTransfer `    
-Source "https://repo.company.local/iso/windows11.iso" `    
-Destination "D:\Deploy\windows11.iso" `    
-Priority Low

Параметр -Priority Low дозволяє використовувати лише вільну пропускну здатність мережі.

Користувачі при цьому не відчувають деградації роботи мережі.

Практичний кейс: автоматичне отримання резервних копій

Припустимо, необхідно щодня завантажувати резервну копію бази даних.

Сценарій:

$date = Get-Date -Format "yyyyMMdd"

$url = "https://backup.company.local/db_$date.bak"
$file = "D:\Backups\db_$date.bak"
Start-BitsTransfer `
    -Source $url `
    -Destination $file

Такий скрипт легко інтегрується з:

• Windows Task Scheduler;
• системами моніторингу;
• CI/CD-конвеєрами;
• інструментами резервного копіювання.

Робота з пріоритетами

BITS підтримує кілька рівнів пріоритету.

Start-BitsTransfer `
    -Source $url `
    -Destination $file `
    -Priority Foreground

Доступні значення:

• Foreground
• High
• Normal
• Low

Рекомендації:

Правильне використання пріоритетів допомагає оптимізувати навантаження на корпоративну мережу.

Типові проблеми та способи їх усунення

Служба BITS вимкнена

Перевірка:

Get-Service BITS

Запуск:

Start-Service BITS

Автоматичний старт:

Set-Service BITS -StartupType Automatic

Завдання зависли

Перегляд помилок:

Get-BitsTransfer |Select JobId, JobState, ErrorDescription

Очищення черги:

Get-BitsTransfer |Remove-BitsTransfer

Відсутність доступу до ресурсу

Перевірте:

• DNS-резолюцію;
• правила міжмережевого екрану;
• проксі-сервер;
• права доступу;
• SSL-сертифікати.

Коли варто використовувати BITS

BITS особливо ефективний у таких сценаріях:

• завантаження великих ISO-образів;
• отримання резервних копій;
• оновлення програмного забезпечення;
• автоматизація розгортання серверів;
• робота через VPN;
• передавання файлів між філіями;
• розподіл пакетів у корпоративних мережах.

Якщо файл має великий обсяг або передається через нестабільне з'єднання, BITS зазвичай є кращим вибором, ніж стандартні механізми копіювання.

Висновки

Служба BITS залишається одним із найбільш недооцінених інструментів екосистеми Windows для передавання великих файлів. На відміну від класичних засобів завантаження, вона забезпечує відмовостійкість, автоматичне відновлення передачі після мережевих збоїв, контроль використання пропускної здатності та роботу у фоновому режимі.

Інтеграція BITS із PowerShell дозволяє легко автоматизувати завантаження резервних копій, дистрибутивів програмного забезпечення, образів операційних систем та інших великих файлів. Особливо корисною ця технологія є в корпоративних середовищах із віддаленими офісами, VPN-з'єднаннями та обмеженими мережевими ресурсами.

Для адміністраторів Windows, DevOps-інженерів та фахівців з автоматизації знання можливостей BITS є важливим елементом побудови надійної інфраструктури передачі даних.