Łączyć DuckDB do Excela, Arkuszy Google, AI i REST

Silnik analityczny, który jest plikiem

DuckDB jest kolumnowy i wektorowy, co technicznie rzecz biorąc oznacza, że agreguje miliony wierszy na laptopie bez narzekania. To sprawia, że jest to dziwne i użyteczne narzędzie do umieszczenia go w arkuszu kalkulacyjnym.

• Brak serwera, brak usługi, brak portu. Plik jest bazą danych, a silnik działa wewnątrz agenta, który go odczytuje.
• Agregacja odbywa się w DuckDB, na komputerze, na którym znajduje się plik. W sieci przesyłany jest wynik — zwykle kilkaset wierszy spośród kilkuset milionów.
• To naturalny koniec procesu przetwarzania danych: ktoś buduje plik .duckdb z pliku Parquet lub CSV, a reszta firmy odczytuje go w ten sposób, bez angażowania magazynu danych.
• Zarówno widoki, jak i tabele są wymienione, więc plik, którego użyteczną powierzchnią jest zestaw uporządkowanych widoków, można odpytać jako taki, a nie jako jego surowe tabele.

Twój kod SQL DuckDB, przekazany bez zmian

Agent nie ma warstwy tłumaczeniowej. Zapisane polecenie jest poleceniem odbieranym przez DuckDB, więc dostępne są dobre części dialektu, a nie tylko przybliżone.

• GROUP BY ALL i ORDER BY ALL, które usuwają większość żmudnych czynności z zapytania analitycznego.
• SELECT * EXCLUDE (col) i SELECT * REPLACE (...), w przypadku gdy chcesz wyświetlić wszystko oprócz jednej, nikomu niepotrzebnej kolumny.
• QUALIFY, dzięki czemu można filtrować funkcję okna bez konieczności umieszczania całości w podzapytaniu.
• Pełne funkcje okienkowe, CTE i wyrażenia listowe — Dialekt DuckDB, a nie jego przenośny podzbiór.

-- DuckDB SQL, docierający do silnika dokładnie tak, jak napisano SELECT * EXCLUDE (internal_id) FROM ( SELECT region, product, sum(amount) AS income, internal_id, row_number() OVER (PARTITION BY region ORDER BY sum(amount) DESC) AS rk FROM sales GROUP BY ALL ) QUALIFY rk <= 3 ORDER BY region, revenue DESC

Zagnieżdżone kolumny są dostarczane jako JSON

DuckDB ma bogatszy system typów niż komórka arkusza kalkulacyjnego, dlatego warto wiedzieć, co gdzie trafia, zanim utworzy się na jego podstawie raport.

• Kolumny STRUCT, LIST, MAP i UNION są zwracane jako tekst JSON — czytelne, możliwe do przeanalizowania i nieskrócone do czegoś złego.
• Kolumny BLOB są kodowane w formacie Base64, a nie usuwane.
• Daty, znaczniki czasu, znaczniki czasu ze strefą czasową i system liczb dziesiętnych są dostarczane bez zmian, dzięki czemu liczby pozostają liczbami, a zaokrąglanie odbywa się za Twoją zgodą.
• Wszystko, czego kierowca nie jest w stanie przedstawić, jest odpowiednio oznaczone w komórce, zamiast pojawiać się jako pusta informacja, którą trzeba by zauważyć.