Machine learning, modelování, predikce... jsou na ně vaše data připravena? | Mňamka #192

Machine learning, deep learning, umělá inteligence - málokdo přesně ví, co se za těmito pojmy skrývá, ale zhruba každý člověk tuší, že budoucnost se bez nich neobejde. Machine learning neboli strojové učení proniká i do business sféry, kde pomáhá získat podnikům konkurenční výhodu - a kdo by ji nechtěl? Spousta firem je ochotna vynaložit nemalé prostředky na sestavení ML modelu, ale jen zlomek těchto modelů je nakonec úspěšně použit. Proč? Pojďme to vzít od začátku…

Dvě základní otázky

Pokud za námi přijdete s poptávkou na model, zeptáme se vás na dvě základní otázky: 1) jaká máte data a 2) jaký model potřebujete. Obě otázky jsou naprosto klíčové a úzce spolu souvisejí. Zaměřme se na tu první. Odpověď, kterou slýcháme často zní: “Jasně, máme X oddělení, každé sbírá data už řadu let, a když náhodou vypadnou systémy, tak to tam nasypem ručně”. To nám ale mnoho neřekne. 

Data

Pro model (a obecně pro jakoukoliv smysluplnou analýzu) potřebujeme, aby data byla kvalitní a byl jich dostatek. Model se na nich bude totiž trénovat. Sami si můžete představit, co je snazší - učit se z jasně strukturovaných poznámek, nebo z mnoha zdrojů, které jsou mezi sebou špatně provázané, označují totéž různými jmény, velké množství informací v nich úplně chybí a nejste se schopni v nich vyznat? Po očištění a “uklizení” dat se pak může ukázat, že použitelná je jen část. Jak velká ta část musí být, aby se na ni dal postavit model, nám napoví druhá otázka.

Model

Modelů existuje celá řada. Někdo chce předvídat odchod zákazníka, jiný chce rozsegmentovat uživatele podle jejich chování, aby na ně mohl lépe cílit reklamu. Modely, které jsou vázány na nějakou časovou proměnnou, mají obecně daleko striktnější požadavky na data. Například pokud chceme předpovídat sezónní chování, musíme mít dostatek dat za několik sezón dozadu, pravděpodobně nám nebudou stačit poslední dva roky. U segmentace by dva roky mohly stačit bohatě. 

Tady si dovolím udělat malou odbočku. Připomeňme si, co bývá hlavním cílem modelu - navýšit revenue nebo zvýšit efektivitu nějakého procesu. Proto by měl být typ modelu vybrán tak, ať jeho implementace má co největší dopad. Jenže jak víme, že právě např. model segmenující uživatele je to, co firmu posune nejdál? Bez znalosti dat a předchozích analýz nijak. Proto není dobré se bezhlavě vrhat do modelování, pokud svá data neznám. 

Use case

Definování tzv. use case je základní stavební kámen odpovědi na druhou otázku, kterou jsme zmiňovali na začátku - vím, proč model chceme, co od něj očekáváme, co s jeho výsledky budeme dělat a kam nás to může posunout. Tady nesmí být žádná neznámá.

Osobně si myslím, že aby měl model co největší efekt, měl by být spíše třešničkou na dortu než první nástroj, po kterém sáhneme. Možná se najde někdo, kdo slíbí vytvoření modelu, aniž by vaše data viděl, ale jak říká náš Jirka “nevěřte šamanům”. Je spousta bubáků, kteří se během modelování mohou ukázat a zajistí, že se úspěšnost modelu bude rovnat tahání karet z klobouku (v poslední době to může být typicky odlišné chování zákazníků během pandemie). Předchozí analýza (tzv. feasibility study) odhalí největší rizika a ukáže, zda je rozumné se do modelu pouštět, jaké může mít limity, a nebo, že je potřeba prostě počkat a sesbírat více dat.

Myslíte si, že jste ve fázi, kdy má smysl nad modelem uvažovat? Znáte svá data, víte, jak by vám mohl model pomoci? Nebo jste zatím ve fázi, kdy byste rádi koukli na svá data a zjistili, co se s nima dá dělat a jak je na budoucí modelování připravit? Neváhejte se nám ozvat, rádi to s vámi probereme :)

Máte k článku nějaké otázky nebo připomínky? Klidně mi napište, ráda to s Vámi proberu :-)

Barbora Kacerovská
datový detektiv
LinkedIn

Postavili jsme stejného AI chatbota nad firemními daty v Googlu i v Microsoft Azure. | Mňamka #557

Postavili jsme stejného AI chatbota nad firemními daty v Googlu i v Microsoft Azure. | Mňamka #557

Skoro každá firma dneska sedí na hromadě vlastních dokumentů - produktové listy, FAQ, smlouvy, zápisy z projektů. A skoro každá firma by chtěla to samé: chatbota, kterému napíšete otázku a on odpoví z vašich dat, ne z toho, co si kde přečetl na internetu. Zní to jednoduše. My jsme si to chtěli osahat pořádně, a tak jsme jedno a to samé řešení postavili dvakrát - jednou v Google Cloudu, podruhé v Microsoft Azure. Tady je, co z toho vypadlo.

Microsoft Fabric vs. dbt | Mňamka #556

Microsoft Fabric vs. dbt | Mňamka #556

Když firmy modernizují svou datovou platformu, narazí dřív nebo později na otázku, jaký datový stack zvolit a co je pro jejich byznys nejvhodnější. Migrovat na Microsoft Fabric? Nasadit dbt? Otázka je ale položená trochu zavádějícím způsobem, jde totiž o srovnání dvou věcí, které stojí na jiné úrovni datového stacku: Fabric je platforma, dbt je transformační nástroj, který na takové platformě běží. Přesto má smysl se ptát, jak se tyto dva světy doplňují, kde si uvnitř Fabricu konkurují nativní nástroje a dbt, a kdy se vyplatí sáhnout po dbt jako standardní transformační vrstvě.

7 signálů, že vaše firma potřebuje datovou strategii | Mňamka #555

7 signálů, že vaše firma potřebuje datovou strategii | Mňamka #555

Každá firma chce zvednout efektivitu a využít příležitosti, které dnes AI nabízí. Jenže než nasadíte jakýkoliv model, copilota nebo „chytrou analýzu", musíte mít v pořádku to, na čem AI stojí a to jsou pevné datové základy. Následující signály jsou věci, se kterými se u klientů stále poměrně často setkáváme. Pokud některý z nich zní povědomě, datová strategie není nice-to-have. Je to základ. A ten se bohužel nedá přeskočit, i když by to bylo hodně pohodlné. Dá se oddálit, ale pak se vždy platí i s úroky.