Случилось то, чего я ждал. Итак, есть сервис, который клонит репо, а дальше кеширует файлы из опред. директорий. Почему и как - не важно.
Чтобы сервис работал как надо, тесты на CI сразу идут в Stash где лежит репо, клонят все и проверяют, что все было правильно склонировано.
Уже догадываетесь? Кто-то сделал коммит и поменял файлы, а тесты проходят. Почему? так их "не запускает" никто. Не было изменений в сервисе, как и не было использования этого сервиса (клиенты еще не начали пользоваться), соотв никто тесты не стартовал на CI. В итоге у нас нерабочий сервис, с 0 изменений кода/конфига. Noice.
И вот тут всплывает одна вещь, о которой давно спорили в закрытом чате SRE: планы на CI надо еще кроном раз в сутки прогонять, чтобы не тухли (там был более запутанный и болезненный случай, но идея та же)
Чтобы сервис работал как надо, тесты на CI сразу идут в Stash где лежит репо, клонят все и проверяют, что все было правильно склонировано.
Уже догадываетесь? Кто-то сделал коммит и поменял файлы, а тесты проходят. Почему? так их "не запускает" никто. Не было изменений в сервисе, как и не было использования этого сервиса (клиенты еще не начали пользоваться), соотв никто тесты не стартовал на CI. В итоге у нас нерабочий сервис, с 0 изменений кода/конфига. Noice.
И вот тут всплывает одна вещь, о которой давно спорили в закрытом чате SRE: планы на CI надо еще кроном раз в сутки прогонять, чтобы не тухли (там был более запутанный и болезненный случай, но идея та же)
Статья о разных подходах к загрузке данных по HTTP1/2 с/без Server Push и кешированием.
Выводы конечно чуть странные(хттп1 с кешированием быстрее всего), но примеры и визуализация вполне интересные.
Еще узнал о такой штуке как Push Preference https://tools.ietf.org/html/draft-pot-prefer-push-01
https://evertpot.com/h2-parallelism/
UPD: А лел, тут уже постили https://t.me/sysadmin_tools/2602
Выводы конечно чуть странные(хттп1 с кешированием быстрее всего), но примеры и визуализация вполне интересные.
Еще узнал о такой штуке как Push Preference https://tools.ietf.org/html/draft-pot-prefer-push-01
https://evertpot.com/h2-parallelism/
UPD: А лел, тут уже постили https://t.me/sysadmin_tools/2602
Evertpot
Performance testing HTTP/1.1 vs HTTP/2 vs HTTP/2 + Server Push for REST APIs
Forwarded from Good reviewer - Bad reviewer (Oleg Kovalov)
5й серия ревью, мы вернулись к Go, сегодня посмотрели в Погреб. Read-heavy бд на го. Если кратко - весь смысл в mmap файле. А еще нужно следить за аллокациями.
https://www.youtube.com/watch?v=SuGQddgCr8o&feature=youtu.be
Репозиторий https://github.com/akrylysov/pogreb
https://www.youtube.com/watch?v=SuGQddgCr8o&feature=youtu.be
Репозиторий https://github.com/akrylysov/pogreb
YouTube
0005. Pogreb / Go / Good reviewer - Bad reviewer
Мы вернулись к Go, сегодня посмотрели в Погреб. Read-heavy бд на го. Если кратко - весь смысл в mmap файле. А еще нужно следить за аллокациями.
Репозиторий https://github.com/akrylysov/pogreb
Мы в Телеграме: https://t.me/good_bad_reviewer и там же чат для…
Репозиторий https://github.com/akrylysov/pogreb
Мы в Телеграме: https://t.me/good_bad_reviewer и там же чат для…
Хороший сборник ресурсов для подготовки к интервью SRE от админа @golanglibrary и @devopslibrary (и даже @ntwrkmms)
https://github.com/mxssl/sre-interview-prep-guide
https://github.com/mxssl/sre-interview-prep-guide
GitHub
GitHub - mxssl/sre-interview-prep-guide: Site Reliability Engineer Interview Preparation Guide
Site Reliability Engineer Interview Preparation Guide - mxssl/sre-interview-prep-guide
Reducing support for 32-bit Apple targets, что логично и даж внезапно. По идее и другие языки подтянутся в скором времени.
The Rust team regrets to announce that Rust 1.41.0 (to be released on January 30th, 2020) will be the last release with the current level of support for 32-bit Apple targets. Starting from Rust 1.42.0, those targets will be demoted to Tier 3.
https://blog.rust-lang.org/2020/01/03/reducing-support-for-32-bit-apple-targets.html
The Rust team regrets to announce that Rust 1.41.0 (to be released on January 30th, 2020) will be the last release with the current level of support for 32-bit Apple targets. Starting from Rust 1.42.0, those targets will be demoted to Tier 3.
https://blog.rust-lang.org/2020/01/03/reducing-support-for-32-bit-apple-targets.html
blog.rust-lang.org
Reducing support for 32-bit Apple targets | Rust Blog
Empowering everyone to build reliable and efficient software.
В 2019 не успел, постану сейчас. Разбито на блоки для удобства чтения, не более.
https://t.me/kiriharu - личный бложек про многое
https://t.me/MarshalC - и такой же, но больше Питона.
https://t.me/globchan какой скрытный @twentydraft!
https://t.me/dereference_pointer_there - чутьчуть про раст
https://t.me/evodevclub - блог компании, вообще это отличная вещь, когда компания делится материалами, лучше чем смузи по пятницам.
https://t.me/tech_b0lt_Genona - Генон
https://t.me/neverendingit - ссылки на статьи + комментарии
https://t.me/openbsd - новости по теме
https://t.me/BotNews - что нового в апи для ботов телеги (я знаю, среди вас много авторов ботов)
https://t.me/hn_best_comments - одно из лучших изобретений предыдущей декады
https://t.me/datalytx - дата анализ на Питоне, оч советую
https://t.me/devpassion - о разном про DevOps
https://t.me/it_patifon - айти бложек
https://t.me/eecontainer - энтерпрайз контейнеры и около
https://t.me/ch_11 - другой айти блог
https://t.me/cloudlydev - про облака
https://t.me/dataeng - опять о данных
https://t.me/backtracking - отличный канал про игры, геймдев и геймдизайн, очень крутые вещи публикуются!
https://t.me/psyvit - о психологии в айти, советую взглянуть
https://t.me/aloud_thoughts_of_one_programmer - чутьчуть заметок программиста, надеюсь автор будет и дальше писать)
Каналы упомянутые ранее не повторяю, можно в истории поискать, все есть (возможно у поста будет upd с некоторыми опоздавшими)
https://t.me/kiriharu - личный бложек про многое
https://t.me/MarshalC - и такой же, но больше Питона.
https://t.me/globchan какой скрытный @twentydraft!
https://t.me/dereference_pointer_there - чутьчуть про раст
https://t.me/evodevclub - блог компании, вообще это отличная вещь, когда компания делится материалами, лучше чем смузи по пятницам.
https://t.me/tech_b0lt_Genona - Генон
https://t.me/neverendingit - ссылки на статьи + комментарии
https://t.me/openbsd - новости по теме
https://t.me/BotNews - что нового в апи для ботов телеги (я знаю, среди вас много авторов ботов)
https://t.me/hn_best_comments - одно из лучших изобретений предыдущей декады
https://t.me/datalytx - дата анализ на Питоне, оч советую
https://t.me/devpassion - о разном про DevOps
https://t.me/it_patifon - айти бложек
https://t.me/eecontainer - энтерпрайз контейнеры и около
https://t.me/ch_11 - другой айти блог
https://t.me/cloudlydev - про облака
https://t.me/dataeng - опять о данных
https://t.me/backtracking - отличный канал про игры, геймдев и геймдизайн, очень крутые вещи публикуются!
https://t.me/psyvit - о психологии в айти, советую взглянуть
https://t.me/aloud_thoughts_of_one_programmer - чутьчуть заметок программиста, надеюсь автор будет и дальше писать)
Каналы упомянутые ранее не повторяю, можно в истории поискать, все есть (возможно у поста будет upd с некоторыми опоздавшими)
Привлекла фраза из ревью книги от создателей Basecamp:
Scheduling a meeting at Basecamp is cumbersome on purpose. A one-hour meeting with six people costs easily more than one full working day. So, “[m]eetings should be a last resort, especially big ones.” Basecamp also abolished status meetings. Team leads put their weekly or bi-weekly status reports on a Wiki, on Confluence or on Basecamp (the software) for others to read at their convenience.
https://www.embeddeduse.com/2019/01/02/book-review-it-doesnt-have-to-be-crazy-at-work-by-jason-fried-and-david-heinemeier-hansson/
С 1й частью вроде все понятно, а вот про отчетность без митингов через вики заинтересовала. Кто-нибудь подобное делает? Хотелось бы услышать ваш отзыв @olegkovalov
Scheduling a meeting at Basecamp is cumbersome on purpose. A one-hour meeting with six people costs easily more than one full working day. So, “[m]eetings should be a last resort, especially big ones.” Basecamp also abolished status meetings. Team leads put their weekly or bi-weekly status reports on a Wiki, on Confluence or on Basecamp (the software) for others to read at their convenience.
https://www.embeddeduse.com/2019/01/02/book-review-it-doesnt-have-to-be-crazy-at-work-by-jason-fried-and-david-heinemeier-hansson/
С 1й частью вроде все понятно, а вот про отчетность без митингов через вики заинтересовала. Кто-нибудь подобное делает? Хотелось бы услышать ваш отзыв @olegkovalov
Я сегодня рано утром упоминал @backtracking и там была показана крутая демка Polaroid effect colliions.Вещь смотрится дико круто, и вот как оно работает:
When the player takes a photo I duplicate the environment, make it greyscale and slice the meshes to remove anything outside the photo. When they place it into the world I slice the environment's meshes to make a hole for the photo.
Из треда автора: https://twitter.com/mattstark256/status/1213156890475212800
Полный видос https://www.youtube.com/watch?v=ran_yU65Xmg
When the player takes a photo I duplicate the environment, make it greyscale and slice the meshes to remove anything outside the photo. When they place it into the world I slice the environment's meshes to make a hole for the photo.
Из треда автора: https://twitter.com/mattstark256/status/1213156890475212800
Полный видос https://www.youtube.com/watch?v=ran_yU65Xmg
oleg_log
Я сегодня рано утром упоминал @backtracking и там была показана крутая демка Polaroid effect colliions.Вещь смотрится дико круто, и вот как оно работает: When the player takes a photo I duplicate the environment, make it greyscale and slice the meshes to…
YouTube
Polaroid effect collisions and multiple photos
I've rebuilt the polaroid effect using mesh slicing so it can handle collisions and multiple photos.
oleg_log
Что делать половину выходных? Правильно, откапывать свой jwt-велосипед на го. Пожалуй для такого можно и тесты дописать.... https://github.com/cristalhq/jwt #hq
Прошло совсем "немного" времени с последнего упоминания о моем велосипеде с jwt, и вот оно добралось до v1.0.0, так сказать начну новую декаду продуктивно.
Даже тесты есть и вроде работает. Хотя все эти RS, PS, ES смотрятся ненужными мне (ладно RS(A) еще полезно смотрится, но уже есть новый и сексуальный EdDSA).
По большому счету я просто хотел поиграться с вылизыванием кода и написанием непробиваемого апи, собственно альтернативные реализации с interface{}, тоннами кода, лямбдами и прочей ересью меня просто выкашивали.
Лайк-подписка-колокольчик уменьшают кол-во 5хх ошибок в вашем проде https://github.com/cristalhq/jwt #hq
Есть парочка мест, которые непокрыты тестами, но считайте это инпрогресс :)
Даже тесты есть и вроде работает. Хотя все эти RS, PS, ES смотрятся ненужными мне (ладно RS(A) еще полезно смотрится, но уже есть новый и сексуальный EdDSA).
По большому счету я просто хотел поиграться с вылизыванием кода и написанием непробиваемого апи, собственно альтернативные реализации с interface{}, тоннами кода, лямбдами и прочей ересью меня просто выкашивали.
Лайк-подписка-колокольчик уменьшают кол-во 5хх ошибок в вашем проде https://github.com/cristalhq/jwt #hq
Есть парочка мест, которые непокрыты тестами, но считайте это инпрогресс :)
Вот что не меняется на ХН, так это то, что там всегда готовы поговорить про JWT.
В 1м коменте ссылки на другие дебаты, 1606 комментария https://news.ycombinator.com/item?id=21783303
И как по мне, все это выливается из одного места: люди путают stateful и stateless местами, натыкаются на несоответствие и продолжают есть кактус.
Я не сильно советую во все это вчитываться, там много воды, но и втягивать инструмент к себе, без понимания для чего он создавался тоже странно.
Надеюсь я начну и доведу гайд "куда втыкнуть jwt и не ошибиться" до ума.
В 1м коменте ссылки на другие дебаты, 1606 комментария https://news.ycombinator.com/item?id=21783303
И как по мне, все это выливается из одного места: люди путают stateful и stateless местами, натыкаются на несоответствие и продолжают есть кактус.
Я не сильно советую во все это вчитываться, там много воды, но и втягивать инструмент к себе, без понимания для чего он создавался тоже странно.
Надеюсь я начну и доведу гайд "куда втыкнуть jwt и не ошибиться" до ума.
Красивая статья о том, на чём FAANG зарабатывают в % и в миллиардах. Речь о Apple, Amazon, Alphabet(Google), Microsoft, Facebook.
https://www.visualcapitalist.com/how-tech-giants-make-billions/
https://www.visualcapitalist.com/how-tech-giants-make-billions/
Visual Capitalist
How the Tech Giants Make Their Billions
Collectively, the Big Five tech giants combine for revenues of $802 billion, which is bigger than Saudi Arabia's economy. Here's how it breaks down.
А вот это что-то из хорошего:
Now using Zstandard instead of xz for package compression
Мы уже давно в той эре, когда суперсжатие нам не надо, а вот скорость декомпресии напрямую связано с UX и сохранением нервов пользователей.
As announced on the mailing list, on Friday, Dec 27 2019, our package compression scheme has changed from xz (.pkg.tar.xz) to zstd (.pkg.tar.zst).
zstd and xz trade blows in their compression ratio. Recompressing all packages to zstd with our options yields a total ~0.8% increase in package size on all of our packages combined, but the decompression time for all packages saw a ~1300% speedup.
На сколько я помню, lz4 будет посильнее (и в компресии, и в скорости), но и требовательнее по цпу.
https://www.archlinux.org/news/now-using-zstandard-instead-of-xz-for-package-compression/
Now using Zstandard instead of xz for package compression
Мы уже давно в той эре, когда суперсжатие нам не надо, а вот скорость декомпресии напрямую связано с UX и сохранением нервов пользователей.
As announced on the mailing list, on Friday, Dec 27 2019, our package compression scheme has changed from xz (.pkg.tar.xz) to zstd (.pkg.tar.zst).
zstd and xz trade blows in their compression ratio. Recompressing all packages to zstd with our options yields a total ~0.8% increase in package size on all of our packages combined, but the decompression time for all packages saw a ~1300% speedup.
На сколько я помню, lz4 будет посильнее (и в компресии, и в скорости), но и требовательнее по цпу.
https://www.archlinux.org/news/now-using-zstandard-instead-of-xz-for-package-compression/
Forwarded from Telegram News
A Public Notice About the TON Blockchain and Grams
https://telegram.org/blog/ton-gram-notice
https://telegram.org/blog/ton-gram-notice
Telegram
A Public Notice About the TON Blockchain and Grams
Since 2017 the team at Telegram has been developing a new blockchain platform called the TON Blockchain and native cryptocurrency called Grams. This text is intended to publicly clarify certain aspects as we continue to prepare for a successful launch of…
Поговорим о зависимостях? Опять.
Ты берешь либу BSD3, а в ней оказывается зависимость с Affero GPL (AGPL, такая лицензия для опенсурс веб-сервисов), и все, ты нарушитель и должен публиковать весь свой проект в опенсурс.
Большинство из нас конечно в СНГ, где царят чуть другие правила, но зачем лишний раз себе/бизнесу (своему и не) создавать проблемы, которые могут стоить очень дорого?
Соглашусь еще по теме Раста: когда открываешь Cargo.toml чаще хочется взвыть и закрыть. Я понимаю, глаза привыкли видеть другое, но колво одного и того же велосипедирования печалит.
https://www.agwa.name/blog/post/always_review_your_dependencies
Ты берешь либу BSD3, а в ней оказывается зависимость с Affero GPL (AGPL, такая лицензия для опенсурс веб-сервисов), и все, ты нарушитель и должен публиковать весь свой проект в опенсурс.
Большинство из нас конечно в СНГ, где царят чуть другие правила, но зачем лишний раз себе/бизнесу (своему и не) создавать проблемы, которые могут стоить очень дорого?
Соглашусь еще по теме Раста: когда открываешь Cargo.toml чаще хочется взвыть и закрыть. Я понимаю, глаза привыкли видеть другое, но колво одного и того же велосипедирования печалит.
https://www.agwa.name/blog/post/always_review_your_dependencies
www.agwa.name
This Is Why You Always Review Your Dependencies, AGPL Edition
Подробный чеклист о Java Concurrency, с тонной ссылок на тулзы и спецификации. Альманах на самом деле.
https://github.com/code-review-checklists/java-concurrency
А, и еще, жава-каналы - го вп :D
Кто знает каналы про jvm в телеге? подкиньте)
https://github.com/code-review-checklists/java-concurrency
А, и еще, жава-каналы - го вп :D
Кто знает каналы про jvm в телеге? подкиньте)
GitHub
GitHub - code-review-checklists/java-concurrency: Checklist for code reviews
Checklist for code reviews. Contribute to code-review-checklists/java-concurrency development by creating an account on GitHub.
I repeat: do not use spinlocks in user space, unless you actually know what you're doing. And be aware that the likelihood that you know what you are doing is basically nil.
(c) Linus
https://www.realworldtech.com/forum/?threadid=189711&curpostid=189723
(c) Linus
https://www.realworldtech.com/forum/?threadid=189711&curpostid=189723