• Przejdź do treści
  • Przejdź to drugiego menu
  • Przejdź do głównego paska bocznego
  • Przejdź do stopki
  • START
  • BLOG
  • NEWSLETTER
  • KIM JESTEM
  • KONTAKT
Cegładanych

Cegładanych

Dane - Databricks i Chmura Azura

  • Azure
  • Databricks
  • Spark
  • Etl
  • Engineering
  • AI

Czy AI pisze lepszy kod od człowieka? 🤖

23.11.2024 Krzysztof Nojman

WZORCE PROJEKTOWE

Wzorce projektowe jest to coś niezwykle ważnego. Każdy z nas ma często problem, najczęściej jest to jakaś skomplikowana logika do zaimplementowania. Niestety spędzamy sporo czasu nad stworzeniem rozwiązania, które już ktoś rozwiązał. 

Walcząc o oszczędność czasu, można wykorzystać gotowe wzorce. 

Natrafiłem na repo i pomyślałem, że się podzielę. Są tam linki do różnych wzorców wszystko w jednym miejscu. Uważam, że warto kolekcjonować takie rzeczy. Oczytany developer może być ciut lepszy od nieoczytanego. 

Awesome Software and Architectural Design Patterns

DATABRICKS WEBINAR – LAKEHOUSE 

Osobiście lubię oglądać i czytać w tym wypadku polecam webinar Databricks o tworzeniu Lakehouse. Jest to coraz bardziej popularne rozwiązanie w świecie Big Data.  Webinar odbędzie się 15 Lutego 2023, poniżej link do zapisu. 

Jeśli chcesz się dowiedzieć co to Lakehouse, zapoznaj się z poniższymi artykułami. 

  • Czy Data Lakehouse pożre Hurtownię Danych
  • Lakehouse – What is it, and why is it so popular?
  • Destination Lakehouse 101

SUPER AI POMOŻE CI W PRACY

Wiem, że to pewnie żaden news and to nowe cacko od OpenAI ChatGPT wymiata. Zdaje sobie sprawę, że mogłeś o nim słyszeć, ale i tak o tym pisze, bo warto o nim wiedzieć. 

Wyobraźcie sobie, że taki ChatGPT jest wytrenowany na dokumentacji Azure i GitHub. To by niesamowicie przyspieszyło pracę. Już teraz można go poprosić o wygenerowanie kodu i pomaga. 

Poniżej artykuł o tym czy ChatGPT pisze lepszy kod niż człowiek?

Can ChatGPT Write Better SQL than a Data Analyst?

OpenAI

ChatGPT


AZURE DATA EXPLORER 

Jeśli pracujesz z danymi w Azure lub chciałbyś, to warto znać to narzędzie.  Jest to narzędzie do analizy danych w Azure. Możesz użyć Kusto lub Python do analizy i wykonać zadania analityczne na skalę Big Data.

Kiedy używać:

  • Jeśli chcesz zrobić interaktywną eksplorację danych, agregację,  korelacja, wykrywanie anomalii, prognozowanie.
  • Jeśli musisz analizować i przetwarzać dane ustrukturyzowane, częściowo ustrukturyzowane (json/xml) i tekstowe.
  • Analiza niemal w czasie rzeczywistym na nowych danych jest typowym przypadkiem użycia.
  • Nie jest super wydajna dla dużych ilości danych, do tego jest Spark.

Polecam wideo na YouTube oraz MS Learn, żeby zapoznać się z możliwościami tego narzędzia.

How to start with Azure Data Explorer

When to use Azure Data Explorer

What is Azure Data Explorer

Plotly visualizations in Azure Data Explorer

DATABRICKS CLI

Jeśli pracujesz z Databricks, to powinieneś znać Databricks CLI, służy do wydawania poleceń i kontroli środowiska roboczego w Databricks. Dzięki niemu jesteś w stanie zarządzać obszarem roboczym w Databricks, gdzie są hostowane klastry Apache Spark, notatniki biblioteki, joby, ect.

Instrukcje jak z niego korzystać poniżej.

Efektywniejsza praca z Databricks CLI

W kategorii:Newsletter

Big Data ebook
Subskrybuj
Powiadom o
guest

guest

0 Komentarze
Najstarsze
Najnowsze Najwięcej głosów
Opinie w linii
Zobacz wszystkie komentarze

Pierwszy panel boczny

O MNIE

Narzędzia i dobre procesy do przetwarzania danych to podstawa sukcesu i wartości dla firmy. Czytaj więcej…

big data ebook

Ostatnie wpisy

spark joins

Jak Spark robi join?

13.01.2025 By Krzysztof Nojman

Czy JSON to samo zło

04.01.2025 By Krzysztof Nojman

VS Code nowości AI 

09.12.2024 By Krzysztof Nojman

Linki społecznościowe

  • Facebook
  • GitHub
  • LinkedIn
  • YouTube

Wyszukiwanie

Footer

Najnowsze wpisy

  • Jakość danych w Databricks DQX
  • Jak Spark robi join?
  • Czy JSON to samo zło
  • VS Code nowości AI 
  • Lista narzędzi AI dla każdego inżyniera, które warto znać
  • Kilka pomysłów na konfigurację Databricks
  • Co pamięta wykonawca (executor🧠)

Tagi

AI Apache Spark Architektura Azure BIg Data Certyfikat cloud Databricks Data Factory Dataframe DQX ETL Hurtownia Danych Intellij IoT Jaka technologia Join Kod Konfiguracja lakehouse Narzędzia Optymalizacja pyspark Spark Windows 10 zadania

Informacje Prawne

To jest nudna część lecz wymagana, wszystkie notki prawne o stronie znajdziecie tutaj.

Polityka Prywatności

Regulamin

Copyright © 2025 · Wszelkie prawa zastrzeżone. Krzysztof Nojman

wpDiscuz