diff options
| author | vitalyisaev <vitalyisaev@ydb.tech> | 2023-10-20 15:59:05 +0300 |
|---|---|---|
| committer | vitalyisaev <vitalyisaev@ydb.tech> | 2023-10-20 17:22:35 +0300 |
| commit | 9eaf05cd7641e8b698f228b039e3bd3a11fea23a (patch) | |
| tree | 20a5851974ede0fc9a90561118bdcbba4862be9e /CONTRIBUTING.md | |
| parent | 86cae0f179c274076b9794121f25fb396c3a0bb2 (diff) | |
| download | ydb-9eaf05cd7641e8b698f228b039e3bd3a11fea23a.tar.gz | |
YQ Connector:splitting data stream on the server side
1. Поток данных из SQL источника разбивается на блоки (pages). Основная логика в [этом файле](https://a.yandex-team.ru/review/4701354/files/1#file-ydb/library/yql/providers/generic/connector/app/server/streamer.go). Новый блок выделяется каждые 10000 строк (это поведение будет усовершенствовано в отдельном тикете).
2. Некоторые файлы перемещены из utils в paging для того, чтобы utils не превращался в свалку.
3. Удалены более неактуальные интеграционные тесты на ограничение количества прочитанных строк.
4. Опционально запускается HTTP-сервер с профилировщиком рантайма.
Diffstat (limited to 'CONTRIBUTING.md')
0 files changed, 0 insertions, 0 deletions