Из объектов получить таблицу с привязкой к значениям?

Question

[AlexNov001]

День добрый

Имеется 2 набора данных:
1. $objects, состоящая из n строк {object}
2. $data_cur, хеш таблица {name, object, quantity},
наполняемая вот так: $data_cur += "" | Select-Object -Property @{N = 'name'; E = {$var1.name}}, @{N = 'object'; E = {$var2.name}, @{N = 'quantity'; E = {$var3.count}}

Данные вида:
name object quantity
name1 object1 1
name1 object5 10
name1 object2 5
name2 object2 1
name2 object3 4

Мне нужно получить (как итог) таблицу вида:

Т.е. соответствие данных между name, object и quantity.
В целом, достаточно получить для csv строки вида "name1;1;5;0;0;10;0" и т.д чтобы значения соответствовали

Подскажите, пожалуйста, как это можно реализовать. Вроде выглядит просто, но никак не выходит

Comments

[MaxKozlov]

может вам это просто в 'эксель загрузить и построить сводную таблицу ?
p.s. $data_cur у вас всё же не хеш таблица, а массив объектов

[Владимир]

Я бы шёл таким путем:
Строка в таблице может быть объектом с атрибутами Name, object 1, object 2,..., object n.
Значит надо получить массив таких объектов и экспортировать в тот же CSV.

Откуда (вернее - как?) берутся данные, из описания непонятно. var1, var2, var3 - они как-то связаны?
Данные в п. 2 к object привязаны или к name?

[AlexNov001]

Владимир,
данные собираются циклами и скидываются в итоге в $data_cur += .. . Var1, 2, 3 между собой связаны в том плане, что это вывод значений name object quantity за итерацию цикла, т.е. условно у нас у name1 есть 5 штук object2 и т.д. а object в отдельном наборе это весь список возможных наименований, которые могут встречаться.
Т.е. мы отталкиваемся в первую очередь от списка $objects и как бы по нему сверяем, какие значения quantity у name1, name2,.. А если данных нет, то записываем 0.

MaxKozlov, не совсем удобно(да и не понятно как), т.к. хотелось бы иметь на выходе уже отсортированные данные, чтобы минимизировать дальнейшую обработку

[MaxKozlov]

AlexNov001, вот вы пишете

у name1 есть 5 штук object2

И как оно должно в результате выглядеть ?
если у name есть object1, object2, по одной штуке - это понятно. А несколько object2- непонятно

[Владимир]

AlexNov001,
После описания яснее не стало, скорее - наоборот...
Данные по количеству к чему привязаны? К name или к object?
А так, фраза "данные собираются циклами" и 3 загадочные переменные намекают на то, что там жуткая жуть твориться. Без описания исходных данных трудно что-то дельное посоветовать...

[AlexNov001]

MaxKozlov, Владимир,
Согласен, возможно 3 переменные скорее запутывают и по сути к вопросу отношение имеют посредственное. Ограничимся просто наличием данных вида:
1 набор: $data_cur
name object quantity (int)
name1 object1 1
name1 object5 10
name1 object2 5
name2 object2 1
name2 object3 4

2 набор:
object1 (яблоко )
object2 (арбуз)
object3 (огурец)
object4 (петрушка)

Попробую описать словами на примере картинки-таблицы и первого поста:
есть некий Вася (name1), у него есть 1 яблоко (object1), так же у этого name1 есть 5 арбузов (object2), у него 0 огурцов (object3) и т.д.

$data_cur.name $data_cur.object $data_cur.quantity
Вася Яблоко 1
Вася Арбуз 1
(Вася Огурец 0) - этой строки там не будет

а есть Иван (name2), у него 0 яблок (object1), 1 арбуз (object2), 4 огурца (object3) и т.д.

Т.е. в моем понимании я должен пройтись по списку из $objects, выстроив их в горизонталь как аттрибуты и заполнить значения quatity из массива $data_cur для каждого name. Но у меня фигня какая-то получается на выходе, а должна быть табличка-картинка из первого поста..

[Владимир]

AlexNov001,
Мда... Переменные ушли, легче не стало.
Вопрос-то мой был простой - "Откуда (вернее - как?) берутся данные?"

Если предположить, что есть есть объект с атрибутами Name, Object, Quantity и массив, являющийся перечнем для Object, можно перебирать массив и для каждого элемента массива фильтровать объекты по атрибуту "Object", создавать новый объект и добавлять в него атрибуты ( Add-Member -MemberType NoteProperty -Name 'Name' -Value $Quantity). Тогда результатом будем набор объектов, который легко можно выгрузить в CSV (или вот ещё), правда там столбцы получаться как name, а строки как object.

Но это все не важно.
В текущем описании задачи есть объект $data_cur, у которого 3 атрибута name, object и quantity, которые, по всей видимости являются (каждый из них) массивами, никак не связанными друг с другом.
И, поэтому варианты следующие:

1. описание задачи неверно;
   
2. данные собираются неверно;
   
3. может я что-то упускаю.
   

Третий пункт добавил, так как телепатические способности у меня отсутствуют...

Можно начать с простого:
когда $data_cur уже сформирован. надо добавить
$data_cur | Get-member
$data_cur.GetType()
и выложить сюда результат.

[MaxKozlov]

AlexNov001, может быть вам надо данные собирать как-то по-другому, а не сортировать собранное после ?

и безотносительно сбора данных.

Для каждого массива данных $data_cur сочетание nameXXX+objectYYY уникально ?
то есть для name1 бывает ли в одном наборе несколько object1 или только object1..object6 по одной штуке ?

если это так, сортировка сводится к группировке по name и формированию из группы объекта с набором свойств, что в-общем-то задача 10 минут. но уже завтра :)

[AlexNov001]

MaxKozlov,
Сочетание nameX+objectY встречается в массиве только 1 раз, т.е. в массиве может быть хоть хоть 6 строк name1, но с разными object

Владимир,
Как раз name, object и quantity связаны - nameX+objectY дает свой результат(quantity) и встречается во всем объеме $data_cur один раз

> $data_cur | Get-member
TypeName: Selected.System.String

Name MemberType Definition
---- ---------- ----------
Equals Method bool Equals(System.Object obj)
GetHashCode Method int GetHashCode()
GetType Method type GetType()
ToString Method string ToString()
Quantity NoteProperty System.Int32 Quantity=5
Object NoteProperty System.String Datastore=object1
Name NoteProperty System.String Hostname=name1

> $data_cur.GetType()

IsPublic IsSerial Name BaseType
-------- -------- ---- --------
True True Object[] System.Array

>Вопрос-то мой был простой - "Откуда (вернее - как?) берутся данные?"
Данные собираются так - получается список доступных name, далее у каждого name спрашивается его список доступных ему object, для каждого из которых подсчитывается количество quantity и строка name, object и quantity записывается в массив $data_cur

[MaxKozlov]

AlexNov001,

Данные собираются так - получается список доступных name, далее у каждого name спрашивается его список доступных ему object, для каждого из которых подсчитывается количество quantity и строка name, object и quantity записывается в массив $data_cur

Вот именно тут можно было бы и складывать сразу правильно. И это проще, чем сортировать.
Точнее сортировать-то тоже не сложно, но сам код для понимания сложнее :)

[AlexNov001]

MaxKozlov,
Спасибо, Ваш пример с тестовыми данными работает и появилось немного своих мыслей.
Но не пойму почему в случае с моими(наполненные не руками) данными $name_data.ContainsKey($field) всегда возвращает False и как это исправить

Вывод:
> $name_data
Name Value
---- -----
object1 {@{Name=name1; object=object1; quantity=1}}
object2 {@{Name=name1; object=object2; quantity=8}}

>$name_data.ContainsKey("object1")
False

[MaxKozlov]

AlexNov001, пробелы скорее всего где-то или кодировка, если у вас поля не ascii
можно попробовать сравнить так
($name_data.GetEnumerator() | select -first 1).name -eq 'object1'

можно попробовать выгрузить в xml и посмотреть глазами в файл, есть ли там пробелы
$name_data | export-clixml -path d:\111.xml

p.s лучше перейти в комментарии к ответу

Answer 1

[MaxKozlov]

$fields = 'object1','object2','object3','object4','object5','object6'
$data = 'name object quantity
 name1 object1 1
 name1 object5 10
 name1 object2 5
 name2 object2 1
 name2 object3 4' -split "`r`n" | ConvertFrom-Csv -Delimiter ' '

foreach($d in ($data | Group-Object -Property name)) {
    $o = [ordered]@{ name = $d.name }
    $name_data = $d.Group | Group-Object -Property object -AsHashTable
    foreach ($field in $fields) {
        if ($name_data.ContainsKey($field)) {
            $o[$field] = $name_data[$field].quantity
        }
        else {
            $o[$field] = 0
        }
    }
    [PSCustomObject]$o
}

name    : name1
object1 : 1
object2 : 5
object3 : 0
object4 : 0
object5 : 10
object6 : 0

name    : name2
object1 : 0
object2 : 1
object3 : 4
object4 : 0
object5 : 0
object6 : 0

а складывать сазу в кучку было бы примерно так же. создать $o
в цикле заполнить поля, преобразовать в объект

p.s. интересно, подсветка powershell когда-нибудь появится ?

Comments

[AlexNov001]

Выяснил почему сравнение возвращает false - потому что $name_data[$field] возвращает пустоту..
Файлы xml идентичные, разница лишь в выделенной строке в случае автоматического наполнения:

<Objs Version="1.1.0.1" xmlns="http://schemas.microsoft.com/powershell/2004/04">
  <Obj RefId="0">
    <TN RefId="0">
      <T>System.Collections.Hashtable</T>
      <T>System.Object</T>
    </TN>
    <DCT>
      <En>
        <S N="Key">object3</S>
        <Obj N="Value" RefId="1">
          <TN RefId="1">
            <T>System.Collections.ObjectModel.Collection`1[[System.Management.Automation.PSObject, System.Management.Automation, Version=3.0.0.0, Culture=neutral, PublicKeyToken=31bf3856ad364e35]]</T>
            <T>System.Object</T>
          </TN>
          <LST>
            <Obj RefId="2">
              <TN RefId="2">
---->               <T>Selected.Microsoft.PowerShell.Commands.GenericMeasureInfo</T>
                <T>System.Management.Automation.PSCustomObject</T>
                <T>System.Object</T>
              </TN>
              <MS>
                <S N="name">name2</S>
                <S N="object">object3</S>
                <S N="quantity">4</S>
              </MS>
            </Obj>
          </LST>
        </Obj>
      </En>
      <En>
        <S N="Key">object4</S>
        <Obj N="Value" RefId="3">
          <TNRef RefId="1" />
          <LST>
            <Obj RefId="4">
              <TNRef RefId="2" />
              <MS>
                <S N="name">name2</S>
                <S N="object">object4</S>
                <S N="quantity">1</S>
              </MS>
            </Obj>
          </LST>
        </Obj>
      </En>
    </DCT>
  </Obj>
</Objs>

PS либо явно указываю, что там string, то xml вообще одинаковые

[MaxKozlov]

AlexNov001, видимо там, где значения полей name и object, берутся откуда-то, надо их приводить к базовому типу строки.

[AlexNov001]

MaxKozlov,
все верно, привел входные данные к единому стилю и все заработало корректно. Спасибо за помощь!