Newsletter

JAK WYBRAĆ TECHNOLOGIĘ W AZUREPrzy nauce Azure dobrze jest wiedzieć jak dobrać odpowiednią usługę dopasowaną do problemu. Sam nie raz zetknąłem się z nieodpowiednim użyciem narzędzi. Na szczęście jest pomocna dłoń, poniżej link do infografiki, która podpowie Ci jak dobrać narzędzia i czym się kierować. To bardzo przydatna checklista. Azure Technology … [Więcej ...] oCzy to koniec z Big Data? 🚄

JAK PRZYSPIESZYĆ PYTHONA Trafiłem na narzędzie, które podobno jest w stanie przyspieszyć Pythona...  Numba bo o nim mowa tłumaczy funkcje Pythona na zoptymalizowany kod w czasie wykonywania przy użyciu standardowej biblioteki kompilatora LLVM. Tak skompilowany algorytm może zbliżyć się do prędkości C lub Fortran.  Nie musisz wymieniać … [Więcej ...] oCzy Python może być szybszy?⏲️

CO PRZYNIESIE ROK DLA INŻYNIERÓW DANYCH Jeśli lubisz sobie poczytać, to jest ciekawy artykuł o tym, co może być w nowym roku. Próba przewidzenia czy coś się zmieni w naszej pracy.   Reszta ze szczegółami w artykule. Whats-next-for-data-engineering-in-2023 DANE GEO Jeśli miałeś styczność z danymi geograficznymi, a zapewne miałeś, to zawsze … [Więcej ...] oHurtownie Danych Porównanie Gigantów 🧱

WZORCE PROJEKTOWE Wzorce projektowe jest to coś niezwykle ważnego. Każdy z nas ma często problem, najczęściej jest to jakaś skomplikowana logika do zaimplementowania. Niestety spędzamy sporo czasu nad stworzeniem rozwiązania, które już ktoś rozwiązał.  Walcząc o oszczędność czasu, można wykorzystać gotowe wzorce.  Natrafiłem na repo i pomyślałem, że się … [Więcej ...] oCzy AI pisze lepszy kod od człowieka? 🤖

W tym wydaniu:AutoloaderUnity CatalogDaft vs SparkArchitektura medalionu  DATABRICKS AUTOLOADER Może się zdarzyć, że próbujesz załadować dane z warstwy raw. Zastanawiasz się jak będziesz procesował dane inkrementalnie? Pliki codziennie wpadają do folderów w storage account. Za każdym razem ich ilość może być inna. Jak już je załadujesz to coś trzeba z nimi zrobić … [Więcej ...] oJak inkrementalnie ładować dane z Raw ▶️

W tym wydaniu  DATABRICKS NOWY SQL EDYTORDatabricks wprowadził nowy ulepszony edytor do edycji SQL. Edytor zawiera funkcje zwiększające produktywność, takie jak paleta poleceń, zwijanie kodu oraz dostosowywane motywy, a także filtry generowane przez AI i przeglądarkę plików w przestrzeni roboczej.Jest też zintegrowany z Asystentem to oznacza, że może dostarczyć jakiś … [Więcej ...] oCzy Databricks jest coraz lepsze ❓