Яндекс для разработчиков

HighLoad++ начнётся уже завтра, 24 ноября! Приходите вживую или подключайтесь онлайн: трансляция докладов с главной сцены будет открытой.

О разработке в Яндексе на главной сцене расскажут:

1. 24 ноября, 13:30 (МСК)
Доклад: Как достать всё что угодно со всего интернета
Спикер — Илья Кучумов, руководит разработкой поиска по товарам в Яндексе

Ключевая задача нового поиска Яндекса по товарам — подготовить самую полную базу, учитывая предложения со всего интернета. Эта база формируется на основе данных партнёрских фидов и самостоятельного парсинга товаров в интернете. Значительную часть данных поставляет именно парсинг: без него поиск по товарам превратился бы в поиск по списку сайтов, а не по всему интернету.

Как работает наш парсинг, как мы оптимизировали код похостовым кешированием, как поддерживаем актуальность цен, как устроено машинное обучение и с какими подзадачами мы справились недостаточно хорошо — в своём докладе Илья будет рассказывать именно о поиске по товарам. Но аналогичные подходы Яндекс применяет и для других задачах по извлечению данных.

2. 24 ноября, 18:00 (МСК)
Доклад: SPQR: горизонтальное масштабирование PostgreSQL
Спикеры — Денис Волков (разрабатывает PostgreSQL в Yandex Cloud в команде Open Source DBMS development) и Кирилл Решке (кодит в Yandex Cloud)

Команда Yandex Cloud уже давно пытается горизонтально масштабировать PostgreSQL. Stateless Postgres Query Router — новая система Яндекса для горизонтального масштабирования PostgreSQL через шардирование (роутинг запросов по диапазонам). Система работает по протоколу Postgres, предполагает управление перемещением данных между шардами. Поддерживает работу как в сессионном, так и в транзакционном режиме пуллинга запросов.

Как это работает, объяснят Денис Волков и Кирилл Решке.

3. 25 ноября, 14:40 (МСК)
Доклад: Как мы делали отказоустойчивый Redis в Yandex Cloud
Спикер — Евгений Дюков, разрабатывает Managed Databases в Yandex Cloud

Говорят, что кластерным Redis пользуются только те, у кого он никогда не падал. Но проблемы с надёжностью случаются и у Sentinel, и у Redis Cluster.

Поэтому в Yandex Cloud создали собственный агент — rdsync (название выбрали по аналогии с другими своими решениями: pgsync — для PostgreSQL, mysync — для MySQL). Пропатчили Redis, чтобы можно было делать failover/switchover безопасно. Обложили это всё множеством функциональных и jepsen-тестов. Сделали отдельный демон, который может повторять протокол Sentinel с точки зрения взаимодействия с клиентами (https://redis.io/docs/reference/sentinel-clients/).

В докладе Евгений расскажет, чем команду Yandex Cloud не устроил вариант «из коробки», как они поддерживали обратную совместимость, как тестировали собственное решение и проверяли, что оно не теряет данные.

Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем 2022 Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

3 и 4 декабря приглашаем на YaTalks — одну из крупнейших конференций Яндекса для IT-сообщества: https://clck.ru/32jikH.

В этом году тема конференции — «Люди превыше всего»: технологии многое решают в нашей жизни, но их создают люди. YaTalks 2022 объединит экспертов из разных точек мира: всех, кто делает крутые продукты и сервисы, готов делиться знаниями и экспертизой.

Конференция пройдёт полностью онлайн. В программе:
– 80+ спикеров расскажут о технологических прорывах, новых разработках и жизни в IT;
– дебаты и питч-сессии: обсудим тренды индустрии и науки;
– встречи и индивидуальные консультации с ведущими экспертами российских и мировых IT-компаний;
– лайвкодинг: решение алгоритмов на скорость в атмосфере дружеского соревнования.

Следите за обновлениями на сайте https://clck.ru/32jikH или подпишитесь на YaTalks 2022 в Telegram: https://t.me/yatalks2022

YaTalks 2022: Люди превыше всего Смотрите конференцию Яндекса для IT-сообщества 3-4 декабря 2022 года

До nexthop осталось 4 дня!

21 ноября Яндекс проведёт пятую конференцию для сетевых инженеров и тех, кто интересуется происходящим в мире сетевых технологий.

С докладами выступят эксперты из China Telecom, Qrator, BI.ZONE, Института cистемного программирования РАН, Ozon, МегаФона и Яндекса. Они поделятся опытом создания крутых балансировщиков, применения открытых ОС в коммутаторах и интеллектуальных контроллеров в сетях. Помимо докладов мы проведём дискуссию среди экспертов и обсудим, что же происходило с SDN долгие годы.

Чтобы принять участие, не забудьте зарегистрироваться:

nexthop→2022 21 ноября Яндекс проведёт международную конференцию по сетевым технологиям NextHop. Это будет уже пятая конференция для сетевых инженеров и тех, кто интересуется прои....

24 и 25 ноября приходите на Highload++ слушать доклады и общаться. Напоминаем: по промокоду Yandex билеты будут на 10% дешевле.

Начнём знакомить вас с теми, кто расскажет об опыте разработки продуктов и сервисов Яндекса на Highload++:

1. 24 ноября, 10:00 (МСК)
Доклад: С чего начинается биллинг облачных сервисов
Спикер — Сергей Нечаев, разрабатывает биллинг в Yandex Cloud

Сейчас биллинг Yandex Cloud каждые сутки обрабатывает около 4,2 миллиардов метрик разных сервисов, а отражение инцидента в детализации занимает единицы минут.

Сергей расскажет, как проектировала биллинг команда Yandex Cloud: как строили объектную модель, какие архитектурные решения выдержали проверку временем, что помогло масштабироваться в 100 раз.

2. 24 ноября, 14:40 (МСК)
Круглый стол СТО: Инженерная культура
Спикер — Олег Бондарь, отвечает за создание YDB

С 2018 года, когда множество компаний начали цифровую трансформацию и активно занялись собственной разработкой, словосочетание «инженерная культура» стало таким же популярным, как и сама цифровая трансформация.

Олег вместе с коллегами из крупных компаний попробуют найти ответы на вопросы о российской инженерной культуре: что это такое? Как её оценивать, строить и справляться с препятствиями на пути формирования?

3. 25 ноября, 12:20 (МСК)
Доклад: PaaS cookbook
Спикер — Алексей Данилов, руководит разработкой PaaS

Цель инфраструктурной команды — улучшить надёжность и отказоустойчивость, уменьшить time to market, снизить когнитивную нагрузку. Для этого многие компании реализуют свою домашнюю платформу (PaaS).

Алексей поделится набором рецептов, которые помогут реализовать и поддерживать собственную PaaS, а также оценить эффективность её внедрения.

4. 25 ноября, 17:00 (МСК)
Круглый стол СТО: Buy or build?
Спикер — Сергей Мельник, отвечает за Алису и все умные устройства Яндекса

Сергей вместе с коллегами из крупных компаний обсудит главные дилеммы российских СТО в 2022: искать замену решениям ушедших вендоров или разрабатывать самим?

Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем 2022 Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

24 и 25 ноября состоится HighLoad++ — крупнейшая профессиональная конференция для разработчиков высоконагруженных систем. В этом году у Яндекса будет свой трек: https://clck.ru/32bgCZ

Тема Яндекс трека — базы данных. Миром правят данные. А мы знаем, как их обрабатывать и хранить: Яндекс работает с крупнейшими объёмами информации в стране, наши разработчики контрибьютят во многие СУБД, в том числе Open Source.

На нашем треке вас ждёт 16 докладов от экспертов из Яндекса, Tarantool, VK и других крупных компаний.

Мы понимаем ценность комьюнити и заинтересованы в развитии сообщества разработчиков с глубокой экспертизой в области баз данных. По промокоду Yandex билеты будут на 10% дешевле.

Присоединяйтесь!

Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем 2022 Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

21 ноября Яндекс проведёт международную конференцию по сетевым технологиям nexthop. Это будет уже пятая конференция для сетевых инженеров и тех, кто интересуется происходящим в мире сетевых технологий.

В этом году для вас с докладами выступят эксперты из China Telecom, Qrator, BI.ZONE, Института cистемного программирования РАН, Ozon, МегаФона и Яндекса. Они поделятся опытом создания крутых балансировщиков, применения открытых ОС в коммутаторах и интеллектуальных контроллеров в сетях. Помимо докладов мы проведём дискуссию среди экспертов и обсудим, что же происходило с SDN долгие годы.

nexthop→2022 пройдёт в гибридном формате: в офисе Яндекса и онлайн. Участие в конференции бесплатное, но количество мест в зале ограничено. Пожалуйста, зарегистрируйтесь и дождитесь приглашения на площадку или прямую трансляцию:

nexthop→2022 21 ноября Яндекс проведёт международную конференцию по сетевым технологиям NextHop. Это будет уже пятая конференция для сетевых инженеров и тех, кто интересуется прои....

Как получить офер в Яндекс за 2 дня? Участвовать в Weekend Offer Backend 29–30 октября.

Если вы не менее трёх лет занимаетесь разработкой на Python, Java, C++ или Go (или программировали на другом языке, но хотите сменить его):

1) Зарегистрируйтесь на сайте мероприятия и пройдите онлайн-отбор до 26 октября.
2) Пройдите технические собеседования 29 октября, чтобы уже 30 октября встретиться с нанимающими командами.

Weekend Offer Backend 29–30 октября Офер в Яндекс за 2 дня для бэкенд-разработчиков.

21 ноября мы в пятый раз проведем конференцию по сетевым технологиям Next Hop. Прием докладов уже открыт — будем рады видеть вас в качестве спикеров!

Ключевые темы:

— Data Center network design;
— Network performance analysis;
— Routing protocols development;
— Network architecture and technologies development;
— Network side of service scaling (load balancing, CDN, traffic and peering engineering);
— Network programmability, automation and orchestration;
— Container and VM networking;
— Open-source network operating systems;
— High-performance software data path implementations, libraries, and frameworks (e.g. XDP+eBPF, DPDK, VPP);
— Open interfaces, abstraction models and APIs to network hardware (e.g. switchdev, SAI, P4 runtime);
— TCP congestion controls and signalling;
— HPC and ML interconnects;
— CI/CD in networking;
— Network monitoring;
— Infrastructure for network automation.

Если вы хотите выступить, заполните форму: https://forms.yandex.ru/surveys/13456662.856e1d64048a080ce0efb3f0b3a621cae2ddb137/

Weekend Offer Mobile уже скоро ⏰

Осталось меньше недели, чтобы успеть на Weekend Offer для мобильных разработчиков.

Если вы разрабатываете для iOS или Android (в том числе с помощью Flutter) более трех лет — регистрируйтесь по ссылке и решайте задачи отборочного этапа, они доступны до 23:59 6 июля.

9 июля пройдут две онлайн-секции с кодом, на которых мы предложим вам задачи, посвященные языку, платформе или навыкам написания кода для нетривиальных задач, а уже 10 июля подведем итоги и предложим лучшим участникам присоединиться к командам наших сервисов.

Будет сложно, будет интересно.

Оффер от Яндекса за выходные 9-10 июля Яндекс проводит Weekend Offer для мобильных разработчиков — мероприятие, на котором можно получить оффер от Яндекса за 2 дня.