ydb/library/cpp/string_utils/csv, branch main

Improve csv parsing speed in С++ csv library

2025-06-25T08:35:36Z

Improve csv parsing speed in csv library На примере ВМ в QYP на ssd скорость чтении csv этой либой: - до этих изменений стабильно показывает 383-387 MB/s - после этих изменений стабильно показывает 613-615 MB/s **++Просьба PR пока не мерджить++**. Пока что надеюсь просто получить шип от овнеров. Мы собираем метрики по текущей производительности в процессе импорта в YDB CLI. Чуть позже, если всё ОК, вмерджу этот PR, чтобы мы замерили разницу. commit_hash:a23fc7e631733ffe3cae2941da8b3bdb75bccc94

Make sure returned TStringBuffers do not change during splitter lifetime. Also make input string reference const

2024-12-10T14:11:35Z

Make input string reference const Make sure returned TStringBuffers do not change during splitter lifetime splitter.Consume() возвращает TStringBuf. Если в колонке есть ескейпинг кавычек, вся колонка обрамлена двойными кавычками (`"`), а внутри для ескейпинга двойных кавычек используются две идущие подряд двойные кавычки (`""`). В таком случае вернуть TStringBuf, ссылающийся на кусок входящего TString, не получится, т.к. нужной подстроки в нем не существует. Для этого используется мембер TVector\ CustomStrings. В него накидываются нужные кусочки из исходной строки и в конце складываются в мембер-строку TString CustomString Например, из строки `"abc""cde""efg"` копились кусочки `abc"`, `cde"`, `efg` и в конце склеивались. И возвращался TStringBuf из этой строки-мембера. Проблема в том, что если в другой колонке той же строки также встречались кавычки с ескейпингом, эта строка-мембер CustomString очищалась. При том, что на неё всё еще ссылался возвращённый ранее TStringBuf. В итоге "предыдущий" TStringBuf либо начинал ссылаться на часть новой строки, если новая строка была длиннее, либо на часть новой строки \+ рандомный набор байт в памяти, если новая строка оказывалась короче. Фикс в том, чтобы хранить все строки, сгенерённые сплиттером, всё время жизни сплиттера commit_hash:aa4957e1d8030cd48d06eaa16a7ad61e878348f8

Intermediate changes

2024-07-19T14:41:55Z

feat contrib: aiogram 3

2024-01-19T10:10:03Z

Relates: https://st.yandex-team.ru/, https://st.yandex-team.ru/

External build system generator release 65

2023-12-05T09:25:06Z

Update tools: yexport, os-yexport

add darwin-arm64 CMakeLists

2023-11-20T11:34:20Z

add ymake export to ydb

2023-06-13T08:05:01Z

Remove extra semicolon (library)

2023-06-10T10:55:11Z

External build system generator release 29

2023-04-19T11:10:48Z

Update tools: yexport

Revert ymake build from ydb oss export

2023-03-28T19:25:04Z