GitHub

Spark SQL query not using partition key when partition key is aliased/nested

This might be related to a query issue I am seeing. In short I am trying to read in from collection A so that I can write to collection B. Querying the DataFrame with a partition key when the value is ...
IEEE

Generating Narrations of Nested SQL Queries Using Context-free Grammars

Abstract: In the software industry, Structured Query Language (SQL) remains a highly sought-after skill required by most employers. SQL is widely adopted as the preferred declarative language to ...
GitHub

Issue when reading Hudi tables with nested partition fields

Reading a Hudi table with nested partition fields (e.g., _meta.partition.year: LongType) fails with ClassCastException: UTF8String cannot be cast to Long. The error ...
技術評論社

第52回 MySQLの パーティショニング機能

パーティショニングとは、 1つのテーブルデータを分割して管理する仕組みのことです。MySQLでは、 バージョン5. 1から標準でパーティショニングの機能が提供されています。 パーティショニングを行うことで巨大なデータを複数に分割でき、 分割された ...
マイナビニュース

ゼロから始めるクラウド型DWH「Azure SQL Data Warehouse」

今回も以下のように、前回と同じSQLのチューニングを行います。 select l_orderkey, sum(l_extendedprice * (1 - l_discount)) as revenue, o_orderdate, o_shippriority from customer, orders, lineitem where c_mktsegment = 'BUILDING' and c ...
note

Tableau Prep分析関数Partitionを試したお話（SQLにあるが、Desktopにない）

Tableau Prep は3－4週間に一度、機能開発が進みます。 そのうち、昨年バージョンアップにて次の関数が導入されました。 ・Fixed（Tableau同じみのLOD関数ですね） ・Partition（・・・あれSQLにある、、、あいつ？） 先日、「SQLの肝はPartitionだよね！」という ...