Vložený popis dat

Vstupní data vloženého typu pro dávkové zpracování jsou uvedena v informačním obsahu úlohy implementace dávky. Můžete například předat soubor CSV jako vstup implementace v uživatelském rozhraní nebo jako hodnotu pro parametr scoring.input_data v zápisníku. Po dokončení dávkové úlohy implementace se výstup zapíše do parametru metadat scoring.predictions příslušné úlohy.

Popis odkazu na data

Vstupní a výstupní data typu odkaz na data , která se používají pro dávkové zpracování, lze uložit:

• Ve vzdáleném zdroji dat, jako je sektor Cloud Object Storage nebo databáze SQL/no-SQL.
• Jako lokální nebo spravované datové aktivum v prostoru implementace.

Podrobnosti pro odkazy na data zahrnují:

• Odkaz na zdroj dat type závisí na typu aktiva. Viz část Typy odkazů na zdroje dat v části Přidání datových aktiv do prostoru implementace.

• Pro typ data_asset musí být odkazy na vstupní data uvedeny jako /v2/assets href v parametru input_data_references.location.href v informačním obsahu úlohy nasazení. Zde uvedené datové aktivum může být odkazem na lokální nebo připojené datové aktivum. Také, pokud musí být výstupní data úlohy dávkové implementace trvale uložena ve vzdáleném zdroji dat, odkazy na výstupní data musí být uvedeny jako parametr /v2/assets href in output_data_reference.location.href v informačním obsahu úlohy implementace.

• Všechny odkazy na vstup a výstup data_asset musí být ve stejném ID prostoru jako dávková implementace.

• Pokud musí být výstupní data úlohy implementace dávky trvale uchována v prostoru implementace jako lokální aktivum, musí být uveden parametr output_data_reference.location.name . Po úspěšném dokončení dávkové úlohy implementace se v prostoru vytvoří aktivum s uvedeným názvem.

• Výstupní data mohou obsahovat informace o umístění datového aktiva ve vzdálené databázi. V této situaci můžete určit, zda se má dávkový výstup připojit k tabulce, nebo zda se má tabulka oříznout a aktualizovat výstupní data. Pomocí parametru output_data_references.location.write_mode zadejte hodnoty truncate nebo append.

  • Zadáním hodnoty truncate osekne tabulku a vloží data dávkového výstupu.
  • Uvedení append jako hodnoty připojí dávková výstupní data do tabulky vzdálené databáze.
  • Parametr write_mode lze použít pouze pro parametr output_data_references .
  • Produkt write_mode je použitelný pouze pro datová aktiva související se vzdálenou databází. Tento parametr není použitelný pro lokální datové aktivum nebo datové aktivum založené na standardu COS.

"input_data_references": [{
    "type": "data_asset",
    "connection": {
    },
    "location": {
        "href": "/v2/assets/<asset_id>?space_id=<space_id>"
    }
}]

"input_data_references": [{
    "type": "connection_asset",
    "connection": {
        "id": "<connection_guid>"
    },
    "location": {
        "bucket": "<bucket name>",
        "file_name": "<directory_name>/<file name>"
    }
    <other wdp-properties supported by runtimes>
}]

Příprava informačního obsahu, který odpovídá schématu existujícího modelu

Viz tento vzorový kód:

model_details = client.repository.get_details("<model_id>")  # retrieves details and includes schema
columns_in_schema = []
for i in range(0, len(model_details['entity']['schemas']['input'][0].get('fields'))):
    columns_in_schema.append(model_details['entity']['schemas']['input'][0].get('fields')[i]['name'])

X = X[columns_in_schema] # where X is a pandas dataframe that contains values to be scored
#(...)
scoring_values = X.values.tolist()
array_of_input_fields = X.columns.tolist()
payload_scoring = {"input_data": [{"fields": [array_of_input_fields],"values": scoring_values}]}