ydb/util/thread, branch CLI_2.26.0Mirror of YDB github reposhttps://code.mastervirt.ru/ydb/atom?h=CLI_2.26.02025-05-22T12:40:47Zbetter fork-aware pool2025-05-22T12:40:47Za11axa11ax@yandex-team.com2025-05-22T12:00:59Zurn:sha1:c28fa5a5d4eee687fa35713a3b8561b8f892992a
Было: при добавлении-удалении обьекта берем мьютекс, молимся чтобы тот не оказался залочен при форке, никак перед форком на лок не смотрим
Помимо того что это просто не очень надежно, оно не всегда работает. Может случиться так что с мьютексом все нормально, но IntrusiveList все равно [скорапчен](HIDDEN_URL и список закольцован не там где надо (по всей видимости cpu reorder на apple m1 ехидничает).
Стало: берем спинлок вместо мьютекса, в том числе берем его на время форка.
commit_hash:94145ab392390a2c0b9f885275302082524606b2
Add an option to disable the fork aware mode for TThreadPool2025-03-28T08:26:21Zandybgandybg@yandex-team.com2025-03-28T08:11:49Zurn:sha1:93724f9cd4e5c28a1e154375e40cb9722bcdb698
Продолжение починки крэшей при форке
Ситуация такая же - используем subprocess для обработки данных ( subprocess не наши, написаны множеством команд на нескольких языках под конкретные ситуации), быстро избавиться от форка не получится. Есть шанс избавиться от этого пул треда, но тоже не быстро.
Предлагается простое решение - не вызывать `TAtforkQueueRestarter::Get()`совсем, тогда не будет создание singletonа и вызова `pthread_atfork`. Все это под опцией `SetForkAware` - кто хочет может ее включать, для всех остальных ничего не изменится.
Полная обратная совместимость, фикс ничего не мог зацепить. Проверил локально, вызова `pthread_atfork` нет в `unified agent` больше.
Тесты на это очень сложно написать, без больших изменений в тред пуле, пробовал с перехватом `pthread_atfork`, к сожалении, не только `TAtforkQueueRestarter` им пользуется и нормально перехватить тоже не получилось.
commit_hash:3711c6175ca64564f31f811ee1308d70ef6eb5e3
Part of PR. Style2024-11-20T10:14:09Znae202nae202@yandex-team.com2024-11-20T09:52:01Zurn:sha1:0b9d91e900b52bccd6eabd033acbb57c4ee173fc
Часть большого ПР REVIEW:7264088
commit_hash:0f5b03fbbed0ac30f734943309e3ef5cd4d7a30e
FixNamespaceComments in /util2024-09-05T17:17:10Zdmasloffdmasloff@yandex-team.com2024-09-05T17:05:47Zurn:sha1:74184a40c15dc0649a769d9754d0ce7efb44db04
FixNamespaceComments in /util
bb9152570d7c258798644ead5a59f604de05ef3b
Set SpacesInLineCommentPrefix to 1 in /util2024-08-17T20:43:45Zdmasloffdmasloff@yandex-team.com2024-08-17T20:33:42Zurn:sha1:69340f4614e853b9319df4b454ab7497711ee3cd
Set SpacesInLineCommentPrefix to 1 in /util
3853f9ec5143722c1bebd8dc0ffc9b61a6c17657
Intermediate changes2024-04-02T20:02:21Zrobot-pigletrobot-piglet@yandex-team.com2024-04-02T19:52:25Zurn:sha1:ba80a9fbc798f333ba35e1f5fe9882d3d91337b2Library import 6 (#888)2024-01-09T17:56:40ZAlexSmalex@ydb.tech2024-01-09T17:56:40Zurn:sha1:e95f266d2a3e48e62015220588a4fd73d5d5a5cbLibrary import 2 (#639)2023-12-22T16:10:22ZAlexSmalex@ydb.tech2023-12-22T16:10:22Zurn:sha1:148f920350c60c0ca2d89b637a5aea9093eee450Y_VERIFY->Y_ABORT_UNLESS at ^u2023-10-10T07:26:34Zilnurkhilnurkh@yandex-team.com2023-10-10T07:09:12Zurn:sha1:335c640261b6272bc052a251d9b8780150090b45
https://clubs.at.yandex-team.ru/arcadia/29404
add ymake export to ydb2023-06-13T08:05:01Zalexv-smirnovalex@ydb.tech2023-06-13T08:05:01Zurn:sha1:bf0f13dd39ee3e65092ba3572bb5b1fcd125dcd0