summaryrefslogtreecommitdiffstats
path: root/yql/essentials/tests/sql/sql2yql
Commit message (Collapse)AuthorAgeFilesLines
...
* YQL-20368: Fix unsupported literal error positionvitya-smirnov2025-09-041-3/+3
| | | | commit_hash:7007950c8dbbf4d1c8edd5c275eaea723e29e56b
* YQL-20365 ConvertTo, warn for Ensurevvvv2025-09-034-1279/+1333
| | | | commit_hash:39b07bbc84e57d9df02c839273366c28442b789f
* YQL-20189: Track warnings as errorsvitya-smirnov2025-09-032-3/+7
| | | | | | There was an issue that a query with warnings as errors passed translation. commit_hash:890d18853380b5ad669e9684553cdb6991827cff
* YQL-20368: Improve unimplemented literal errorvitya-smirnov2025-09-031-0/+7
| | | | commit_hash:27dc40f323e5d24af0dae4f3917a63248f8f8386
* YQL-20258 simple1 optvvvv2025-09-0218-72/+291
| | | | commit_hash:ad0cc5722938a8e337f7bc9b5f4a631a299c6a99
* YQL-20345: Disable EXCEPT/INTERSECT/DISTINCT before 2025.03vitya-smirnov2025-09-011-0/+21
| | | | | | Added absent checks for `langVer` at `EXCEPT/INTERSECT/DISTINCT` translation. In next PR will get rid of `.sqlx` file extensions. commit_hash:699cc8f6084d1d2fc19ecd53c35a56496dc842f4
* YQL-20340: Fix getelem comp nodeatarasov52025-08-289-0/+388
| | | | commit_hash:4b93115d4e3d46770946a7a462c7413d6183282f
* YQL-20341 handle missing table in the join subtreevvvv2025-08-282-0/+33
| | | | | init commit_hash:7169a3cfe8408c4baff8524a8022b5b219900b94
* YQL-20253: Support `FLATTEN [OPTIONAL] BY` for any data typelambda-delta2025-08-265-0/+189
| | | | | Support `FLATTEN [OPTIONAL] BY` for any data type commit_hash:6fb221fadf29d1dcc7ea4590a21c115fc506aa51
* Intermediate changesrobot-piglet2025-08-193-8/+6
| | | | commit_hash:8ca485c564bd7f0ff3ce9685470a06e07e99d0f4
* YQL-20150: Add OptimizeLMap optimizermaxkovalev2025-08-192-0/+56
| | | | | YQL-20150: Add OptimizeLMap optimizer commit_hash:065921d83e492d815fa95f3e9bedd006aee0c887
* Intermediate changesrobot-piglet2025-08-182-0/+223
| | | | commit_hash:45d5b2e2dd994307de6d103f3b9658f40fd3696b
* Intermediate changesrobot-piglet2025-08-182-6/+6
| | | | commit_hash:44e30306b80ccb5f73f3fc9ab17545e0af3b413f
* Intermediate changesrobot-piglet2025-08-112-6/+6
| | | | commit_hash:5b0aadf271c553415c536606ff7f52575bd267c4
* YQL-20211 YQL-20223: skip nulls in pushdown over optional sidelucius2025-08-083-0/+241
| | | | | | | | | | | Добавляю поддержку фильтрации нуллов при пушдауне на необязательную сторону джоина (до этого она работала только при пушдауне на обязательную сторону). Как в пушдауне предиката с левой стороны одновременно на правую (PredicatePushdownOverEquiJoinBothSides), так и в пушдауне сразу на правую (FilterPushdownOverJoinOptionalSide). Включается по флагу PredicatePushdownOverEquiJoinBothSides. Тесты с включением можно посмотреть тут: <https://nda.ya.ru/t/e2f09Qw_7HNvu6> commit_hash:0f101bfced2a510995577e1bca90eef6d2505992
* YQL-20247 Depends for Udf functionvvvv2025-08-053-0/+38
| | | | commit_hash:4ee9d9b9079b90e8eeb91accc41d6a3a30c3a18c
* YQL-20206: Optimize X AND/OR Not X YQL-20229lucius2025-08-014-0/+114
| | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | Делает возможным такие оптимизации: - `X AND NOT X -> FALSE` - `X OR NOT X -> TRUE` Работает в том числе если X будет завернут в Unessential. Только для неопциональных X. Пример замены когда много аргументов: ``` In: A and X and B and NOT X and C and X and D Out: A and FALSE and B and C and D ``` Выражение из примера можно преобразовать если X, B и C не требуют побочных эффектов. Или вот пример если B' требует побочных эффектов: ``` In: A and X and B' and NOT X and C and X and D Out: A and X and B' and FALSE and C and D ``` Про что думал, но не стал делать: 1) Можно заменять на константу не только X / NOT X, но и всю цепочку подряд идущих узлов без побочных эффектов. Оставляю это другим оптимизаторам, чтобы меньше думать про нюансы и не дублировать код (в частности чтобы не заботиться о типизации если в цепочке оказался Optional Bool). 2) Можно поддержать опциональные X, тогда будет примерно такое преобразование `X AND NOT X -> IF(X IS NULL, NULL, FALSE)`. Неочевидно что это улучшение и пока решили не делать. Оптимизатор под флагом. Тесты с включением флага тут: [https://nda.ya.ru/t/6YuCsGDE7H8Dnd](https://nda.ya.ru/t/YVdMA5B37H8Dne commit_hash:c34cf075a46c6b06c742ff0b15697b93ede75924
* YQL-20258 side effects infrastructurevvvv2025-08-017-0/+118
| | | | commit_hash:cb76201226f30679f63457a9f9e1ebdb31dcd05b
* YQL-20209: use Filter+Unessential instead of SkipNullMembers in ↵lucius2025-08-013-0/+74
| | | | | | EmitSkipNullOnPushdown commit_hash:464cfa9be3ee98de47a47ff4e88db5b0d9eb37ec
* NormalizeDependsOn pipeline stageziganshinmr2025-07-303-0/+53
| | | | commit_hash:a563966e2448de9828c0786f9ba9939b55fc21fd
* YQL-20216 position aware csse nodesvvvv2025-07-282-0/+22
| | | | commit_hash:78445e1b3b0bb001e0d08b36fd4d31bcd9e37eb4
* YQL-19200: Return persistable expression from FLATTEN BY clauselambda-delta2025-07-255-0/+100
| | | | | Return persistable expression from FLATTEN BY clause commit_hash:8b19ad7f7ddf436c2741f9aa1c5402732fc31f06
* YQL-20230: Handle singular types in DoConvertScalaratarasov52025-07-232-0/+78
| | | | commit_hash:c22dc757dcd7996bac8fb892184281503a2ab003
* YQL-20205 added struct type validationvvvv2025-07-232-0/+16
| | | | | init commit_hash:beef3d18a5b85dc793380a01249358243137df70
* YQL-20197: fix FilterOverAggregate when predicate uses all fieldslucius2025-07-222-0/+34
| | | | | Оказалось что пушдаун предиката через Aggregate не работал когда в предикате используются все поля из Aggregate. Чиню commit_hash:c2e8cab88a0adb496464b9dac52807fcc95f433d
* YQL-19896: allow optional side in SingleInputPredicatePushdownOverEquiJoin ↵lucius2025-07-212-0/+187
| | | | | | | | | | | | | | | in some cases Разрешаем пушить на необязательную сторону предикат, который использует только ключевые колонки с обязательной стороны джоина. 1) рассматриваемый предикат зависит только 1 стороны и это обязательная сторона джоина 2) предикат зависит только от ключевых колонок джоина 3) все соответствующие по ключу джоина колонки в обязательном  и необязательном инпутах должны полностью совпадать по типу В этих случаях мы пушим предикат не только на обязательную, но и на необязательную сторону commit_hash:1404e877fdd271dbe8342478a20b99b6f99a4fda
* Intermediate changesrobot-piglet2025-07-172-0/+23
| | | | commit_hash:50d34a5b1e277a0ff5dce83a9cf485e2c0d1a471
* Fix 'Member over renaming FlatMap' optimizeraneporada2025-07-152-0/+17
| | | | commit_hash:589383be883e0948cdf7db8928c5842d60c5c628
* YQL-20171: Fix aggregation joining keyvitya-smirnov2025-07-152-0/+56
| | | | | | | | | | | | | | | | There was a bug with a aggregation deduplication by a column at the translator. For a single column the system joining all aggregations using the generic key. The generic key was just a column name without source name what leads to collision when aggregating multiple different sources with same column names. This patch fixes the generic key by adding a data source name there. Also tests are added. commit_hash:1c0a9da512f68c58d2830e096de76b769b733cb2
* YQL-17269: Fix UNION/EXCEPT/INTERSECT precedencevitya-smirnov2025-07-131-5/+5
| | | | | | | There was a mistake, because actually EXCEPT has the same precedence as UNION. INTERSECT has higher precedence than. commit_hash:20375ef498861c6704571161fa3c4eebf54e895c
* YQL-20125 fixvvvv2025-07-112-0/+60
| | | | commit_hash:f51c77dc72df30e1a870e784f99b1e8148e6cedb
* YQL-20121 fixvvvv2025-07-102-0/+48
| | | | commit_hash:f5827e9ccc7926e7d8a7ed8040c3d3427b8ef592
* YQL-19896 allow onlyKeys=true in FilterPushdownOverJoinOptionalSidelucius2025-07-102-0/+40
| | | | | Сейчас FilterPushdownOverJoinOptionalSide не работает если в предикате используются только колонки из ключа джоина — причин так делать нет, исправляю (под флагом временно чтобы канонизировать тесты ydb) commit_hash:93aa956e4460d95e9e8592595de5e8a77027786b
* YQL-20167 canonized short key contentvvvv2025-07-104-0/+110
| | | | commit_hash:0cc244f5272c4bc099db5bf8fb56566a11391158
* YQL-20170 fixvvvv2025-07-092-0/+28
| | | | commit_hash:2c408c6ee755878a488f1591510d196d1bf5fba1
* YQL-17269: Support UNION/INTERSECT/EXCEPT combinationsvitya-smirnov2025-07-096-0/+404
| | | | | | | | | | | | Introduce `UNION` and `INTERSECT/EXCEPT` grammar rules for precedence. Rewrote `Build` procedure into `BuildStmt`, `BuildUnion`, `BuildIntersection`. Added tests, modify format. It took a lot of time trying to adapt the existing `Build` procedure. The I noticed that the logic for `union` and `intersection` is different, since `union` groups arguments into bundles, but `intersection` is a strictly binary operation. commit_hash:70008ae3c2603364b6dfbeeb189fdc7f5237433d
* Fix pruneKeys over flatMapmpereskokova2025-07-082-0/+40
| | | | commit_hash:cff54a61ed3e2bccb0914d089c0e3d1f33931449
* YQL-19536: Block ifpresentatarasov52025-07-0810-0/+260
| | | | commit_hash:15146ac1817e0abc0483b2c138207daf3b63fdd5
* YQL-20153 params fixesvvvv2025-07-043-0/+38
| | | | commit_hash:6a71bff1ad52eddd1b8c7d516f0810f0decf401e
* YQL-20085: fix FilterPushdownOverJoinOptionalSidelucius2025-07-043-0/+135
| | | | | | | | | | | | | | Тут чинятся 2 проблемы: 1) Rename settings во вложенных джоинах после преобразования не позволяли применить пропушенный предикат, что-нибудь типа "Unknown table name:… Failed to parse labels of struct…" 2) Если до пушдауна типизатор вывел distinct у джоина, а мы его заменили на union all, то типизатор не мог доказать что distinct сохранился и падал. Типизатор править не стали, решили через KeepUniqueDistinct. Обе проблемы немного по-разному проявляются и чинятся в двух случаях: 1) Делаем пушдаун в инпут из последнего джоина (верхний/корневой в дереве) — исходный джоин заменяется на union all из двух джоинов 2) Пушдаун в инпут НЕ из последнего джоина (НЕ верхний/корневой в дереве) — union all появляется внутри "исходного" джоина commit_hash:cc7cfbb973bc7dcabba202ab9a637c3b9f1cb5dd
* YQL-20126 fixvvvv2025-07-042-0/+16
| | | | commit_hash:9a7d4b30d4dd2a5d2fa2d9bd9e34c5153196d288
* Do not generate empty Or in ExtractCommonPredicatesFromLogicalOpsaneporada2025-06-262-0/+22
| | | | commit_hash:7a57d8950e16c8237574833f4289a25ed54226bf
* YQL-17269: support PositionalUnionAll for INTERSECT and EXCEPTkndrvt2025-06-235-0/+368
| | | | commit_hash:4c68311d9e875b6643dd49aae1c385aace4ca978
* YQL-17269: support INTERSECT and EXCEPT without PositionalUnionAllkndrvt2025-06-2010-10/+447
| | | | commit_hash:632e24794e8bcf6ef0502b7e8c031e964d28d36a
* DropAnyOverDistinctEquiJoinInput optimizerziganshinmr2025-06-192-0/+255
| | | | commit_hash:f3a7045b9ba62617929a3d5ad882c9dd2702f2eb
* Add PruneKeys in YT optmpereskokova2025-06-181-0/+7
| | | | commit_hash:b12d341458bb39ffb6b4a4d7a99c3ef25a417ca5
* YQL-20079 drop optimizervvvv2025-06-162-0/+20
| | | | commit_hash:c94ae2e1918d822a6a01192bc2e42d668cf16b4d
* Intermediate changesrobot-piglet2025-06-161-0/+1
| | | | commit_hash:6e56cbea6a1c12b4f9e6b065eedf177763a329d2
* YQL-20054: Fix pg typesatarasov52025-06-062-0/+24
| | | | commit_hash:b0bb9ec1e8b00c8383d182b073073d6eaf04ab2f
* Fix block coalesce for multioptionalatarasov52025-06-062-0/+24
| | | | commit_hash:a9766abf73088d74351c34d5136a3eeb7191ac04