oleg_log
1.72K subscribers
1.88K photos
131 videos
9 files
2.82K links
Shelter for antisocial programmers "Oleg"

halp: @olegkovalov
web: https://olegk.dev
fov: @oleg_fov
chat: @oleg_log_blabla
podcast: @generictalks
Download Telegram
у нас так неделю RabbitMQ лежал, мы ток сегодня заметили, правда никто ничего из тулинга не сказал и не намекнул (мы пре-прод, поэтому не страшно, но можете поругать и рассказать свои истории)
oleg_log
Класс, короч бот оказывается был мёртв, а я думал чего я не получил ни одного сообщ. Я хз что с ним, эти великие 2 десятка человек, что что-то написали - скопируйте и пришлите уже в родную лс @olegkovalov Спасибо :(
Я тут митапчик зачитал. Так уж вышло что появилась [citation needed] тулза, которая проверяет структуру ваших пакетов (читайте микросервисов в монорепе, да и не только).

Вот только публично она пока недоступна, полистайте слайды, там примеры конфига есть. Надеюсь звезды сойдутся счастливо и я буду рад её публишнуть в ближайшие дни, ну либо смотреть сериал Dark и наслаждаться новыми найками.

Слайды https://speakerdeck.com/olegkovalov/impguard-protect-your-project-structure
Классная статейка о текстовом индексе. Даж можно сказать с низкоуровневыми примерами.

Но раз это Go, то почти всегда это https://blevesearch.com/ Правда у меня последние годы складывается ощущения, что проект умирает. И скорее со стороны фич, потому что внутренности вроде как меняются.

https://habr.com/ru/company/oleg-bunin/blog/528346/
oleg_log
Классная статейка о текстовом индексе. Даж можно сказать с низкоуровневыми примерами. Но раз это Go, то почти всегда это https://blevesearch.com/ Правда у меня последние годы складывается ощущения, что проект умирает. И скорее со стороны фич, потому что внутренности…
Как по мне это красиво

https://github.com/blevesearch/bleve/blob/master/go.mod#L11

require (
github.com/RoaringBitmap/roaring v0.4.23
github.com/blevesearch/blevex v0.0.0-20190916190636-152f0fe5c040
github.com/blevesearch/go-porterstemmer v1.0.3
github.com/blevesearch/segment v0.9.0
github.com/blevesearch/snowballstem v0.9.0
github.com/blevesearch/zap/v11 v11.0.13
github.com/blevesearch/zap/v12 v12.0.13
github.com/blevesearch/zap/v13 v13.0.5
github.com/blevesearch/zap/v14 v14.0.4
github.com/blevesearch/zap/v15 v15.0.2
Очень понравилось это репо, о том как собрать свой персональный серверочек. Красиво так по шагам, как собрать фигню без головной боли. SOPS, k3s, wireguard и всякое по мелочи.

В планах есть 1 проект и вот эта штука вполне себе пригодится. Я наверное ток packer бы добавил со своим образом виртуалки и Терраформ (хотя развитие последнего меня напрягает, как-то он сложным становится)

https://github.com/erebe/personal-server
Russ Cox: The freeze is going well, and we are looking ahead to getting large changes ready to merge when the window opens at the start of the release, as we do for all large changes. In the compiler, we are working on two different large changes:

- register ABI work to land at the start of Go 1.17 (Feb 1 2021 work begins, Aug 1 2021 release)
- type parameters work to land at the start of Go 1.18 (Aug 1 2021 work begins, Feb 1 2022 release)

https://groups.google.com/g/golang-dev/c/U7eW9i0cqmo/m/ffs0tyIYBAAJ

https://go.googlesource.com/proposal/+/refs/heads/master/design/go2draft-type-parameters.md
Добрый вечер
Надо ли давать экспериментальное апи вместе с обычным кодом или лучше давать в отдельной версии/ветке?
Anonymous Poll
39%
да
29%
не
32%
хз
oleg_log
Надо ли давать экспериментальное апи вместе с обычным кодом или лучше давать в отдельной версии/ветке?
Кто не уловил: "давать" подразумевается давать вот такие фции возле обычных уже провернно-рабочих:

// @experimental: bla bla
fn Foo() ...
oleg_log
Надо ли давать экспериментальное апи вместе с обычным кодом или лучше давать в отдельной версии/ветке?
Ну так уж и быть, "да" это 1й вариант, "не" это 2й и для тех кто ней уверен "хз"
oleg_log
Russ Cox: The freeze is going well, and we are looking ahead to getting large changes ready to merge when the window opens at the start of the release, as we do for all large changes. In the compiler, we are working on two different large changes: - register…
type byteseq interface {
type string, []byte
}


и мне это нравится, не будет этих []byte("foo") и string(rawBytes) . Но меня заинтересовало другое - а что по поводу таких типовых ограничений (в дженериках) в других языках? Как-то с ходу ничего не вспомнилось :(

А вот это напомнило мне интерфейс с приватным методом, соотв определить такой можно только в пакете, где интерфейс и объявлен (как вы знаете).
type ImpossibleConstraint interface {
comparable
type []int
}


Только теперь такие ж штучки можно делать на уровне типов и это прикольно. Хочется придумать жизненный кейз, где это отлично зайдет (но пока не придумалось).
О, FOSDEM 2021 просыпается. Пока принятых докладов нет, но радует комнатка Zig.

Ждем 6-7 февраля значит.

https://fosdem.org/2021/schedule/tracks/
А по случаю таких массовых гуляний - новый проект: @oleg_log_plus 🎉🎉🎉

Стало интересно вести патреоно-спонсируемый проект, на котором я буду делиться с вами постами, докладами и прочими видами информации, которые на мой взгляд пропускать не стоит, ведь все мы хотим быть лучшими софтвер инженерами.

Канал доступен по подписке на Патреоне https://www.patreon.com/olegkovalov (и там же детали о планах). После чего я дам вам инвайт (не забудьте указать ник в телеге)

- Повлияет ли это на основной @oleg_log в негативном ключе? конечно же нет.
- Поможет ли это ведению других проектов? (@generictalks, @good_bad_reviewer и что там еще? конечно же да.
- Приведет ли это к более сложным мемам в @profunctor_io? конечно же неизвестно.
Memory overall reduce from 298 GB RAM to 112 GB RAM per billion features. Average CPU utilization across all nodes dropped from 208 vCPUs to 72 vCPUs per 10 million rps.

И вообще вся статья неплохая, о том как ребятки поэтапно ускоряли свое хранилище ML-фич.

Как всегда это батчинг (они read-heavy), бинарная сериализация, хеширование и сжатие. И с этого часто стоить начать)

https://doordash.engineering/2020/11/19/building-a-gigascale-ml-feature-store-with-redis/
Я пока не знаю зачем оно мне, но галочку поставить стоит. Всегда хотелось держать под рукой валидный, но рандомный жсон.

Кстати советую канал, если вам интересны темы фаззинга и около.
Check your invocation logs!
Duration: 333.72 ms Billed Duration: 334 ms

Вот это уже сильно. Даже если тарификация будет по 10мс....ох...значит это не будет так смешно https://t.me/oleg_log/3846 (считайте я был инициатором изменения тарификации)

https://www.reddit.com/r/aws/comments/k48mzy/lambda_just_got_perms_billing