Newsletter Dane i Analizy, 2022-05-02

Dzisiaj wielkie święto. I nie chodzi o święto flagi, a o nowy post na blogu. Minął prawie rok od poprzedniego, więc dzień ten zasługuje na miano święta ;-)

Rozproszona architektura, mikroserwisy i baza nosql - taka armata na zwykły sklep internetowy? Tak! Z wyjaśnieniem dlaczego i przykładami w Pythonie! Właśnie to znajdziecie w moim wpisie Sklep rozproszony. To zrobiony w kilka dni proof of concept działania nowoczesnej architektury w dość prostym problemie. Zapraszam do lektury.

Dodatkowo polecam film o tym czym zajmują się poszczególne stanowiska z data w nazwie oraz paczkę informacji i przykładów o Snowflake, który zachwycił mnie podczas demo na Big Data Technology Warsaw Summit.

#AI_ML

Autoencoder For Anomaly Detection Using Tensorflow Keras
Wykrywanie anomalii pryz użyciu metod sztucznej inteligencji

#analiza_danych_koncepcje

Semantic Textual Similarity
Czy te teksty są do siebie podobne? Jak to określić? Kilka sposobów w bardzo dobrym tekście z przykładami

#bazy_danych

Postgres Fuzzy Search
Wyszukiwanie tekstu w bazie PostgreSQL ale nie zawsze precyzyjne - raczej takie “najbardziej podobny tekst” (zobacz też artykuł z działu “Analiza danych - koncepcje”)

#big_data

Simple CDC with Debezium + Kafka
Jak w prosty sposób zmiany w bazie danych przełożyć na komunikaty na Apache Kafka? Użyć Debezium. Chociaż ma ono swoje wady…

#ciekawostki

Data Scientist, Data Analyst, Data Engineer - jaka jest różnica?
“Piramida potrzeb” w zakresie danych, wykonywane czynności i co za tym idzie - nazwy stanowisk. Już wiesz kim jesteś? Albo kim chcesz być?

How I put my whole life into a single database
Jest sobie Felix, który opomiarował całe swoje życie. Zbiera masę danych i co lepsze - pokazuje je na stronie. A co jeszcze lepsze - udostępnia kod źródłowy telemetrii swojego życia

#management

How Machine Learning Generates Income for Businesses
Po co uczenie maszynowe w biznesie? Jakie może mieć zastosowania? Jakie branże wykorzystują ML najczęściej?

#snowflake

Upserting Pandas Dataframes to Snowflake
Jeśli mamy dane w pandasowej tabelce to może chcemy je mieć też w hurtowni typu Snowflake? A przy okazji konkretnego problemu mamy tutorial wykorzystania Snowflake w Pythonie

Near-realtime Data Ingestion in Snowflake
Jak w prawie rzeczywistym czasie zasilać dane w Snowflake?

Building a Panel Dashboard with Snowpark for Python
Na koniec pakietu o Snowflake - coś o prezentacji danych

Zestawienie linków przygotowuje automat, wybacz więc wszelkie dziwactwa ;-)