Powershell + IPMI

Даже не знаю, с чего начать. Наверное, с начала.
По роду своей деятельности возникает нужда массовой замены паролей от интерфейсов управления серверного хозяйства. Политики безопасности, все дела, никуда от этого не денешься. И чем дальше, тем более это хозяйство обширное. Но не только по числу севреров, но и по количеству вендоров. Когда серверов штук пять-десять - зайти на каждый из них да поменять пароль от учетки не шибко сложно. Когда их пара-тройка десятков, уже напряжно, но тоже терпимо (сквозь сжатые зубы). Когда число переваливает за сотню - это уже ни в какие ворота. И ладно, если еще ты знаешь, когда очередной дедлайн, можно распланировать. А если задачу спускают внезапно со вполне себе официальным "это должно быть сделано вчера" - волей неволей задумаешься хоть о какой-нибудь, но автоматизации. Вот и в этот раз.

Я уже не помню, чем меня взбесил стандартный инструмент под названием ipmitool, но тогда я пришел к выводу, что это совершенно неюзабельная шляпа. И пришлось колхозить связку Powershell + Rest API. Этот подход работал, пока вендор был один. Когда их число начало увеличиваться, начало увеличиваться и количество скриптов, потому что каждый вендор ваяет свою версию OpenBMC, перекраивая форматы запросов и ответов под себя. В итоге текущий подход меня перестал удовлетворять от слова совсем, и я снова пришел к изначальному вопросу - как это автоматизировать. И снова таки вернулся к ipmitool.

В этой итерации в общем и целом все получилось. Алгоритм набросал, осталось только выбрать, на чем его реализовывать. И вариантов, как ни странно, аж целых несколько, и продиктовано их наличие некоторыми вводными.
1. Можем взять... bash. Внезапно, да. В целом это даже полезно, но загвоздка в том, что не всюду есть возможность дотянуться со своей станции управления под никсами. А туда, куда можно дотянуться, сделать это можно только из под виндов. Да, постепенно отмирает и винда, но пока еще живет. И ускорить этот процесс не в моих силах.
2. Можем взять... cmd. Тоже внезапно. Этот курилка есть гарантировано везде, где мне приходится работать.
3. Можем взять... да-да, название записи говорит обо всем - старую добрую "мощную ракушку".

И на этот раз я решил пойти немного более заковыристым путем - реализовать алгоритм смены пароля через ipmitool во всех перечисленных оболочках. Что тут сказать, результаты меня удивили. ОЧЕНЬ удивили.

Начнем с того, что нужный скрипт на баше, который я не перевариваю, был написан где-то минут за 20. Повторю - я ненавижу баш. Ну да ладно, написал, и написал, нужно идти дальше. Берем в руки cmd и блонот, и... мама мия. Я баш не любил, да? Как вам такое, Илоны вы наши Маски:

- блджад. В зависимости от того, где была объявлена переменная, вызывается в скрипте она ТРЕМЯ разными способами... Это ж просто азаза...
- ?
­ если объявлена просто в плоском скрипте:
set var=byaka
echo %var%
byaka
­- Угу.
­- если объявлена в FOR как переменная цикла:
FOR /F "tokens=1" %%I... (
echo I
)
- echo %%I ?
- да, забыл проценты набрать. Если же переменная объявлена внутри FOR:
set c=ipmitool -H %%I...
echo !c!

И да, в этом случае еще и специальную инструкцию не забудь про SETLOCAL EnableDelayedExpansion, про который я, к своему стыду, вообще только сегодня узнал. Твою ж налево, а... Но ладно, с грехом пополам, незнамо сколько кружками зеленого чая (кофемашина сломалась, живо напомнив мне 4-ю книгу цикла Экспансия, кто знает, тот знает) и огромного количества матов в голове и эту реализацию удалось допилить до логического конца.

Осталась ракушка. И черт побери, тут я могу лишь вспомнить слова, подсмотренные в сети, используемые в достаточно пикантной ситуации: Light has failed me. В том плане, что чертова ракушка, служившая мне верой и правдой, столько лет, и дававшая приют и защиту от всякого скриптописательного, разлетелась вдребезги.

Итак, в прошлом уже доводилось нарываться: раз и два. В той истории из двух актов Powershell не фигурировал, зато сама история накрепко вбила в голову истину, что передавать пароли через переменную нужно используя одинарные кавычки, и ни в коем случае не двойные. Почему - там было расписано. Пишем:

$user = 'superadmin'
$password = 'My$uperP@ssw0rd'
Invoke-expression "ipmitool.exe -H 127.0.0.1 -U $user -P $password........."

Иии... это не работает. Переменная с паролем все равно раскрывается черт знает во что. Несмотря на использовании нужных кавычек во время ее определения. Но где тогда идет раскрытие? Да, как оказалось, прямо в строке Invoke-expression и идет, там ведь как раз стоят двойные, и без них никуда.

Окей, и что делать? Как выяснилось, вариантов обхода целых две штуки. Первый - это использовать экранирование каждого спец.символа в пароле:

$password = 'My`$uperP`@ssw0rd'

Такой вариант вполне себе прокатывает, но поскольку скриптом буду пользоваться не я один, кто-нибудь определенно забудет про эти экраны. Будет плохо.
Второй вариант - вывести все переменные, которые касаются паролей (а их будет две - старый и новый пароли) из кавычек вообще. Пришлось нагородить примерно такое:

$password = 'My$uperP@ssw0rd'
$expr = "ipmitool -H 127.0.0.1 -U $username -P '"+$password+"' user list"
invoke-expression $expr

И вот этот вариант уже не требует никакой доработки напильником.

Что ж, в итоге все равно остановился на Powershell-варианте, но реализации на cmd и баше лежат под рукой. На всякий случай.

@музыка: L'Avenue - Sundown

@темы: Этот безумный мир, PowerShell, Scripting

---

Volumes and Disks

В рамках миграции данных с одной СХД на другую понадобилось мигрировать и разделы с репликами DPM. В самом DPM есть средства миграции, и они даже работают, но как я уже говорил - DPM = problem, поэтому надо бы как-то проконтролировать, а действительно ли все тома с данными переехали куда надо. Казалось бы, что может быть проще - открыть Disk Manager, да посмотреть, какой том на каком диске. Не в этот раз - DPM плодит тома самостоятельно, и их столько, что проверять это все в рукопашную рехнешься.
Что делать? Нужно как-то получить список вида VolumeID - DiskID. Встроенные средства Win2012 просто так это сделать не позволят, но есть интересная утилитка от SysInternals под названием DiskExt, которая и выдает нужные нам данные. Одна беда - вывод ее является голым текстом, который еще надо будет парсить. Кусок этого вывода ниже:

Volume: \\?\Volume{af0aef03-0821-11e7-80b4-806e6f6e6963}\
   Mounted at: unmounted
   Extent [1]:
       Disk:   0
       Offset: 1048576
       Length: 367001600
Volume: \\?\Volume{fc90d1ab-271d-4bf4-abef-9f6053e00b96}\
   Mounted at: Z:\
   Extent [1]:
       Disk:   2
       Offset: 135266304
       Length: 107236818944
Volume: \\?\Volume{816516e8-a6b7-11ed-810d-1c98ec18d20a}\
   Mounted at: C:\Program Files\Microsoft System Center 2012 R2\DPM\DPM\Volumes\Replica\File System\vol_514b32d1-b1d4-4a4e-b980-a5251c7b357f\
   Extent [1]:
       Disk:   6
       Offset: 61396860534784
       Length: 12719226880
   Extent [2]:
       Disk:   6
       Offset: 46517483208704
       Length: 13946060800000

Вывод прост - нужен парсер. Готовых нет, отсюда следует второй вывод - пишем самостоятельно. Код ниже,а еще ниже - описание того, что нам накодировано.

$output = @()
$datafile = "C:\diskext.txt"

$data = (get-content -path $datafile) -join ";"

$VolumeNamePattern = '^.+?(?=\<img src="/picture/1136.gif" alt=";)" class="smile_img">'
$VolumeMPPattern   = '(?<=Mounted at<img src="/picture/3.gif" alt=":)" class="smile_img">.+?(?=\<img src="/picture/1136.gif" alt=";)" class="smile_img">'
$Diskpattern       = '(?<=Disk<img src="/picture/3.gif" alt=":)" class="smile_img">.+?(?=\<img src="/picture/1136.gif" alt=";)" class="smile_img">'
$OffsetPattern     = '(?<=Offset<img src="/picture/3.gif" alt=":)" class="smile_img">.+?(?=\<img src="/picture/1136.gif" alt=";)" class="smile_img">'
$LengthPattern     = '(?<=Length<img src="/picture/3.gif" alt=":)" class="smile_img">.+?(?=\;|$)'

$VolumeBlocks = $data -split("Volume: ") | where {$_ -ne ""}

foreach ($Volumeblock in $VolumeBlocks) {
    $VolumeObject = ""
    $ExtentsObject = @()
    $VolumeObject = New-Object -TypeName PSCustomObject -Property @{
        VolumeName = [regex]::Match($VolumeBlock, $VolumeNamePattern).Value.Trim()
        VolumeMP   = [regex]::Match($VolumeBlock, $VolumeMPPattern).Value.Trim()
        Extents    = ""
    }
    
    $ExtentBlocks = ($Volumeblock -split "Extent \[.\]:" | select -Skip 1).trim()
    
    foreach ($ExtentBlock in $ExtentBlocks) {
        $ExtentsObject += New-Object -TypeName PSObject -Property @{
            Number = $ExtentBlocks.IndexOf($ExtentBlock)+1
            Disk   = [regex]::Match($ExtentBlock, $Diskpattern).Value.Trim()
            Offset = [regex]::Match($ExtentBlock, $Offsetpattern).Value.Trim()
            Length = [regex]::Match($ExtentBlock, $LengthPattern).Value.Trim()
        }
    }
    $volumeObject.Extents = $ExtentsObject
    $output += $VolumeObject
}
$output | select VolumeName, VolumeMP, Extents

Как это всё безобразие работает?

В первую очередь весь вывод из файла трамбуется в одну огромную непрерывную строку, где теперь уже бывшие строки будут отделены точкой с запятой. После этого бьем получившиеся данные на блоки, где каждый блок - описание одного тома. Ограничителем блока служит сочетание "Volume: ". Ну а потом уже в цикле перебираем все эти блоки и при помощи регулярных выражений, заданных в начале скрипта, вытаскиваем все необходимые данные.

Отдельного упоминания заслуживает блок Extents. Каждый том может располагаться далеко не на одном диске, поэтому внутри блока в цикле нужно будет перебрать каждый кусок тома и выписать оттуда, на каком диске он размещен.

После того, как все данные собраны, они добавляются в общий список объектов с полями имя, точка монтирования, разделы. И затем выводится на экран. А поскольку конечный список является объектом, при желании мы можем обратиться к любому из его полей и навесить любые фильтры, какие только взбредут к нам в голову.

@музыка: Ronan Hardiman - Breakout

@темы: PowerShell, Scripting, DPM

---

Python + TG

Интереса ради запилил себе скрипт на Путоне, который будет вызывать на удаленном сервере программку vnstat, которая уже в свою очередь подсчитает, сколько трафика через сервер прошло. Скрипт это дело всосет и отправит мне в телегу.

import requests,subprocess
#set vars
TOKEN = "here-goes-TG-token"
chat_id = "here-goes-TG-ChatID"

#open vnstat and read its output (monthly traffic)
output = subprocess.Popen(["vnstat", "--oneline"], stdout=subprocess.PIPE).communicate()[0].decode()

#send request to TG API
a = output.split(";")
message = f"VnStat\nTotal for today: {a[5]}\nTotal for month: {a[10]}"

#send request to TG API
url = f"https://api.telegram.org/bot{TOKEN}/sendMessage?chat_id={chat_id}&text={message}"
requests.get(url).json()

Черт побери, насколько же Путон для меня непривычен.
Как я уже отвык от того, что переменные указываются сразу по имени без спец.символа: varname вместо $varname
Каким неудобным кажется разный формат включения переменных в строку в зависимости от того, где эта строка - в операторе вывода или в присвоении значения.

В общем, привыкать и привыкать...

@темы: Scripting