Предотвращаем утечки памяти в Go, ч. 2. Особенности рантайма

При отладке утечек памяти в Go у программиста в какой-то момент может возникнуть ощущение тупика. Все тривиальные ошибки бизнес-логики проверены, но утечки продолжаются, и что дальше делать — непонятно. Это означает, что пора переходить к исследованию особенностей рантайма и того, как они проявляются в конкретно взятой программе, работающей под определённой нагрузкой.

Рантайм Go — сложная, постоянно развивающаяся конструкция, в которой непросто разобраться, но мы постараемся выработать общие рекомендации по решению проблем, связанных с повышенным потреблением памяти.

https://habr.com/ru/companies/ncloudtech/articles/676960/

👉 @golang_lib

Cloud Native Go
Matthew A. Titmus (2021)

Что общего между Docker, Kubernetes и Prometheus? Все эти "облачные" технологии написаны на языке программирования Go. Эта практическая книга показывает, как использовать сильные стороны языка Go для разработки облачных сервисов, масштабируемых и устойчивых даже в непредсказуемой среде. Вы изучите состав и построение этих приложений, начиная с низкоуровневых возможностей Go, паттернов проектирования среднего уровня и заканчивая высокоуровневыми архитектурными соображениями.

👉 @golang_lib

Распределенная потоковая передача сообщений в Golang с использованием Nats JetStream

В этой заметке я кратко расскажу о Nats JetStream, а затем покажу пример кросс-сервисной передачи сообщений с использованием Golang.

https://medium.com/vlmedia-tech/distributed-message-streaming-in-golang-using-nats-jetstream-29f28be66dc6

👉 @golang_lib

Открытое собеседование на Go-разработчика | Тренировочные интервью

0:00 Бэкграунд Сергея
0:49 Бэкграунд Даниила
1:38 Чем Даниил занимается на GO ?
2:40 Что такое ООП? Как это сделано в golang?
5:15 Структура данных. В чём ключевое отличие слайса от массива?
6:14 Можно ли сделать массив с использованием переменной? Если да, то что будет?
7:00 Как работает append в слайсе?
8:00 Задача про слайсы
8:55 Что можно сказать про мапу?
10:16 Есть ли у мапы такие же методы как у слайса: len, cap?
10:44 Какое свойство должно быть у ключа в мапе?
11:29 Может ли ключем быть структура? Если может, то всегда ли?
12:15 Что будет в мапе, если не делать make или short assign?
12:53 Что такое synс.Map ?
13:02 Race condition. Потокобезопасна ли мапа?
13:46 Как задетектить гонку?
13:57 Что есть интерфейс?
15:03 Дополнительный блок фигурных скобок в функции
17:04 Что такое замыкание?
17:32 Что такое захват переменной?
18:34 Какое поведение по умолчанию используется в golang при передаче в функцию?
19:00 Сколько можно возвращать значений из функции?
19:36 Как сделать свои методы для пакета?
20:04 Инвертирование зависимости
21:04 Какие типы каналов существуют?
22:07 Что можно делать с закрытым каналом?
23:18 Что если канал интовый и был получен ноль?
24:03 Аналог default в select'е
25:01 Что такое горутина?
26:22 Где аллоцируется память для горутин?
28:05 Что такое WaitGroup и зачем они нужны?
29:10 Как завершить много горутин?
30:30 Кейсы использования контекста
31:10 Кейс по system design
45:04 Какую архитектуру API Даниил бы выбрал для кейса?
45:15 Какие бывают версии HTTP?
47:57 Какие Devops тулзы можно использовать для кейса?
49:16 Как бы был устроен деплой для этого кейса?
51:06 Тестирование
52:38 Вопросы к Сергею
53:34 Фидбэк по собеседованию с Даниилом, вопросы из чата
1:00:08 Как работает наш сервис?
1:01:36 Вопрос про задачи на собеседовании
1:03:21 Ответы на другие вопросы

источник

👉 @golang_lib

Go Design Patterns
Mario Castro Contreras (2017)

Изучите идиоматические, эффективные, чистые и расширяемые паттерны проектирования и параллелизма в Go с помощью TDD. Эта книга практическое руководство, наполненное многочисленными примерами, раскрывающими возможности паттернов проектирования в Go. Знакомство с моделью параллелизма CSP, объяснение GoRoutines и каналов.

👉 @golang_lib

Go To Memory

Как и многие языки, Go часто использует магию под названием хип (heap). Обычно, когда мы пишем наши джейсоно-гонятели, мы просто не задумываемся об этом, хоть и знаем, что это «где-то есть». Давайте попробуем заглянуть в кроличью нору поглубже и увидеть не только то, какими методами аллокатор Go старается облегчить программисту жизнь, но и то, из чего он состоит в целом.

Меня зовут Антон Киреев, я бэкенд-разработчик с опытом работы больше 11 лет. В настоящее время работаю техлидом в Авито. В жизни мне нравятся две вещи: приносить пользу своей работой и проводить свободное время с семьёй. Именно поэтому я люблю делать что-то быстро, но качественно, а потом отдыхать. Для этого я постоянно учусь и пытаюсь докапываться до сути вещей. Сегодня поговорим, как наша любимая Гошечка работает с памятью.

https://habr.com/ru/companies/oleg-bunin/articles/676332/

👉 @golang_lib

Руководство по сборщику мусора Go

Данное руководство предназначено для того, чтобы помочь продвинутым пользователям Go лучше понять затраты своих приложений, предоставив им сведения о сборщике мусора Go. В нем также содержатся рекомендации по использованию этих сведений для повышения эффективности использования ресурсов приложениями. Руководство не предполагает знаний о сборщике мусора, но предполагает знакомство с языком программирования Go.

https://go.dev/doc/gc-guide

👉 @golang_lib

Валидация полезной нагрузки в Go с помощью Validator

В этой статье вы узнаете, как использовать пакет go-playground/validator для валидации данных в вашем go-приложении. Для задания ограничений валидации в пакете validator используются теги struct. Это позволяет легко интегрировать его в существующие приложения без необходимости переписывать существующий код.

https://thedevelopercafe.com/articles/payload-validation-in-go-with-validator-626594a58cf6

👉 @golang_lib

Повышение производительности JSON неструктурированных структур в Go

Это история о том, как мы сократили 70% расходов на облачный парсинг JSON, написав библиотеку для Go с открытым исходным кодом под названием marshmallow. 🍬🚀

https://medium.com/perimeterx/boosting-up-json-performance-of-unstructured-structs-in-go-5c2f2a017148

👉 @golang_lib

Full-Stack Web Development with Go: Build your web applications quickly using the Go programming language and Vue.js
Автор: Nanik Tolaram (2023)

Эта книга проведет вас через создание и разработку полного современного веб-сервиса, включая аутентификацию, промежуточное ПО, рендеринг на стороне сервера, базы данных, а также современные фронтенд-фреймворки и API на базе Go. Вы начнете со структурирования приложения и таких важных аспектов, как сетевое взаимодействие, а затем интегрируете все части вместе, чтобы создать полноценный веб-продукт. Далее вы узнаете, как создать и отправить полноценный продукт, начав с фундаментальных строительных блоков создания бэкенда на Go. Вы будете применять передовые методы работы с cookies, API и безопасностью, а также совершенствовать свои навыки работы с быстрорастущим фронтенд-фреймворком Vue. Когда ваше приложение с полным стеком будет готово, вы поймете, как вывести его в продакшн и будете готовы обслуживать клиентов.

👉 @golang_lib

Просмотрщик сборок и исходного кода Go

Установка производится с помощью обычных команд Go:
go install loov.dev/lensm@main

Для Linux может потребоваться добавление некоторых дополнительных зависимостей. Чтобы не собирать версию Wayland или X11, можно использовать go install --tags nowayland loov.dev/lensm@main или go install --tags nox11 loov.dev/lensm@main соответственно.

Для запуска программы задайте фильтр регулярных выражений для проверяемой функции. -watch позволяет автоматически перезагружать исполняемый файл и информацию при его изменении.
lensm -watch -filter Fibonacci lensm

https://github.com/loov/lensm

👉 @golang_lib

Ozon Tech QA Meetup: тестируем на Go

В Ozon хорошо развита инфраструктура и Go-сообщество. У нас большая экспертиза в создании собственных фреймворков и обучении людей языку Go. Поэтому у нас стали появляться автотесты на Go: тестировщики хотели быть ближе к разработчикам, чтобы те могли в любой момент посмотреть тесты, что-то исправить или просто поревьюить код.

https://www.youtube.com/watch?v=oXjK672Yrbs

👉 @golang_lib

Улучшенная маршрутизация HTTP-серверов в Go 1.22

В Go 1.22 ожидается появление интересного предложения - расширение возможностей по поиску шаблонов (pattern-matching) в мультиплексоре, используемом по умолчанию для обслуживания HTTP в пакете net/http.

Существующий мультиплексор (http.ServeMux) обеспечивает рудиментарное сопоставление путей, но не более того. Это привело к появлению целой индустрии сторонних библиотек для реализации более мощных возможностей. Я рассматривал эти возможности в серии статей "REST-серверы на Go", в частях 1 и 2.

Новый мультиплексор в версии 1.22 позволит значительно сократить отставание от пакетов сторонних разработчиков, обеспечив расширенное согласование. В этой небольшой заметке я кратко расскажу о новом мультиплексоре (mux). Я также вернусь к примеру из серии "REST-серверы на Go" и сравню, как новый stdlib mux справляется с gorilla/mux.

https://eli.thegreenplace.net/2023/better-http-server-routing-in-go-122/

👉 @golang_lib

Обзор синтаксиса и возможностей языка Go (шпаргалка)

Большинство примеров кода взято из книги A Tour of Go, которая является отличным введением в Go. Если вы новичок в Go, пройдите этот тур.

https://github.com/a8m/golang-cheat-sheet

👉 @golang_lib

Lua конфигурация Neovim для разработки на Go

В процессе знакомства с Neovim было прочитано много статей, конфигураций на Github, было просмотрено огромное количество роликов на Youtube на тему настройки, но в большинстве случаев приходилось донастраивать все под себя. В этой статье я расскажу как я настроил Neovim для разработки на Go, используя только Lua плагины и init.lua.

Эта статья может быть полезна тебе, если:
пишешь на Go
есть конфиг на Vimscript, но хочется на Lua
хочется пересесть с тяжелых современных IDE или текстовых редакторов, таких как Goland, Vscode и других, на Neovim

https://habr.com/ru/articles/678298/

👉 @golang_lib

Distributed Services with Go: Your Guide to Reliable, Scalable, and Maintainable Systems
Автор: Travis Jeffery (2021)

Эта книга для разработчиков на Go, которые хотят научиться создавать распределенные системы. Вы знаете основы языка Go и хотите применить свои знания на практике. Создавайте распределенные службы, которые отличаются высокой доступностью, устойчивостью и масштабируемостью. Эта книга - именно то, что вам нужно для применения Go в реальных ситуациях.

Начните с самого необходимого - работы с хранилищами, затем пройдите путь через создание сети клиента и сервера и, наконец, через распределение экземпляров сервера, развертывание и тестирование. Все это сделает кодирование на вашей основной работе или в побочных проектах проще, быстрее и веселее.

👉 @golang_lib

Minecraft protocol VarInt и VarLong. Как из единиц и нулей сделать число на примере Go?

В этой статье я хочу объяснить на пальцах, как из байтов преобразуются числа в нужные типы данных (VarInt, VarLong). Детально рассмотрим реализацию, примеры и напишем unit-тесты. Вспомним бинарные операции, двоичную и шестнадцатеричную систему счисления.

https://habr.com/ru/articles/677642/

👉 @golang_lib

Проблемы функции Golang init

Прежде чем говорить о функции init в Golang, необходимо понять, что такое пакет в Golang. Программа go организована в пакеты. Пакет собирает несколько исходных файлов в одном каталоге. Он похож на ящик, в котором находятся некоторые инструменты или небольшая машина. Он является отправной точкой для инициализации всего пакета. По-видимому, это соответствует назначению функции init.

Предположим, что у вас есть код без функции init, например, такой:

// foo.go
package foo

var A int

func bar(){}

// main.go

import "foo"

func main(){
fmt.Println(foo.A)
}

https://habr.com/ru/articles/771858/

👉 @golang_lib