Vývoj v Pythone

Python sa hodí napríklad na pravidelný import dodávateľského cenníka. Program skontroluje štruktúru súboru, priradí položky ku katalógu a označí riadky, ktoré nákupca musí opraviť. Rovnaký jazyk sa dá použiť pre rozhrania API, analytiku a spracovanie dokumentov.

Kontrola importovaných záznamov s grafom a označenými chybami v údajoch.
Modelová ukážka rozhrania

Na čo Python používame

  • Automatizácia

    Skripty a služby, ktoré preberajú opakovanú prácu.

  • Spracovanie údajov

    Import, čistenie a prevod údajov medzi systémami.

  • Umelá inteligencia

    Práca s jazykovými modelmi a strojovým učením.

  • Serverové aplikácie

    Rozhrania a služby pre webové a mobilné aplikácie.

Na ktorú časť aplikácie sa hodí Python?

  • Spracovanie dát

    Pri importe cenníka zapíšeme dôvod odmietnutia každej položky a určíme, ako spracovať opravený súbor.

  • Učenie modelov

    Python má knižnice na prípravu tréningových údajov, porovnanie modelov a vyhodnotenie chýb na vzorke.

  • Rozhranie v prehliadači

    Na používateľské rozhranie je vhodnejší JavaScript alebo TypeScript.

  • Mobilná aplikácia

    Python môže obsluhovať serverovú časť. Mobilné rozhranie a prácu s telefónom navrhujeme osobitne.

Prevádzkové nároky aplikácie v Pythone

  • Pevne určené verzie knižníc, aby sa prostredie dalo zopakovať
  • Pravidelné aktualizácie kvôli bezpečnosti
  • Spúšťanie naplánovaných úloh so záznamom o behu
  • Sledovanie chýb a upozornenia

Rozhodnutia pri návrhu

Python sa používa na integračné úlohy, analýzu a aplikačné služby. Pri dátovej pipeline musí kód spájať položky stabilným identifikátorom a uchovať pôvod vstupov.

Synchrónny výpočet v obsluhe sieťovej požiadavky môže blokovať ďalších klientov. Náročné kroky oddeľujeme podľa časového profilu a potreby obnovy.

Príklad z pracovného postupu

V CSV exporte sa kód skladu „0017“ skladá iba z číslic. Automatické načítanie do celočíselného typu by odstránilo úvodné nuly. Správny parser zachová identitu skladu aj pri následnom spojení s číselníkom.

Ako výsledok overiť

Opakovaný import s rovnakými dátami má vrátiť dohodnutý počet položiek a reprodukovateľné výsledky.

Kontrakt medzi modulom a zvyškom aplikácie

Pri odovzdávaní dát medzi programom a externým systémom potrebujeme definovať typy polí, ich jednotky a význam nevyplnenej hodnoty. Chýbajúca cena, nulová cena a cena s odlišnou menou opisujú rozdielne situácie. Konverzia na spoločný typ ich nemusí zachovať.

Referenčné údaje pre test preto obsahujú aj hraničné hodnoty, staršiu verziu záznamu a prerušené spracovanie. Výstup porovnáme s podnikom schváleným príkladom pri rovnakých vstupných predpokladoch.

Pôvodný odborný zdroj – Python

Presnosť a opakovateľnosť pri importe súm

Pri čítaní cien z tabuľky treba rozlíšiť pôvodnú textovú hodnotu, desatinný oddeľovač, menu a pravidlo zaokrúhľovania. V Pythone ponúka modul decimal desatinnú aritmetiku a nastaviteľné zaokrúhlenie. Presný vstup má zmysel vytvárať zo zdrojového zápisu. Predchádzajúci prevod cez binárne číslo už môže zaviesť odchýlku.

Skúšobný súbor má obsahovať hodnotu na hranici zaokrúhlenia, zápornú položku a prázdny riadok. Z výsledku má byť zrejmé, ktorý záznam bol odmietnutý a z akej príčiny. Dva behy nad rovnakým vstupom majú vydať zhodný obchodný výsledok.

Ako riešiť chybný riadok bez opakovania celej práce

Import môže obsahovať tisíce správnych záznamov a jeden dátum v neočakávanom formáte. Rozhodnite, či má dávka zlyhať celá alebo sa chybný riadok odloží na opravu. Pri druhotnom spracovaní si každá položka musí zachovať identitu platnú pre zdrojový súbor. Číslo riadka je vhodným pomocným údajom iba pri nezmenenej uloženej verzii súboru.

Pri skúške nahraďte chybnú hodnotu a opakujte spracovanie z toho istého potvrdeného podkladu. Výsledný kontrolný súčet a počet správne prevedených položiek majú vysvetliť každý rozdiel oproti prvému behu.

Dokumentácia Pythonu k desatinnej aritmetike

Spracovanie časovej pečiatky musí poznať zdrojový význam miestneho času

Export smien môže obsahovať iba dátum a miestny čas bez informácie o časovom pásme. Pri zmene hodín sa niektoré miestne údaje môžu opakovať a iné sa nevyskytnú. Pred automatickým prevodom preto zistíme, ako pôvodný systém rozlišuje jednotlivé udalosti a eviduje pracovisko.

Import uloží pôvodný text, zistený kontext aj výslednú interpretáciu. Skúška so zmenou smeny počas prechodu času pomôže overiť výpočet trvania a následný export, ktorý pracovníci porovnávajú s dochádzkou.

Otázky z praxe

Ako predísť strate centov pri importe cien v Pythone?

Pri hodnotách, ktoré majú presný desatinný význam, zvolíme desatinnú reprezentáciu alebo celé najmenšie menové jednotky podľa pôvodného formátu. Pravidlo pre zaokrúhlenie určíme pri medzisúčte aj pri koncovom súčte. Kontrolné vstupy zahŕňajú zápornú opravu, zľavu a viac riadkov s hraničnou hodnotou.

Kedy pomôže čítať súbor ako postupnosť záznamov?

Export väčší než dostupná pamäť môžeme spracovať po jednotlivých riadkoch alebo blokoch. Musíme však vedieť, ktoré operácie potrebujú poznať celý súbor, napríklad globálne zoradenie alebo zistenie duplicít. Pri navrhovaní importu preto odlíšime priebežné kontroly od kontrol vyžadujúcich dodatočné úložisko.

Čo má zaznamenať dávka, ktorá sa zastaví na poškodenom vstupe?

Pre správcu je dôležitý súbor, poloha chyby, porušené pravidlo a hranica posledného potvrdeného zápisu. Originálny vstup a verziu importéra treba vedieť opäť priradiť k výsledku. Pri opakovaní po oprave potom rozlíšime už prijaté riadky od tých, ktoré ešte čakajú na spracovanie.

Potrebujete poradiť?

Opíšte nám, čo potrebujete vyriešiť. Odpovedáme e-mailom.

O čo máte záujem?

Martin Michalka vám pošle návrh e-mailom. Opíšte jednu úlohu, ktorú vo firme robíte opakovane.

Ako vás máme kontaktovať?