Olga_ol вчера в 14:50

Новый учебный год: новые образовательные проекты от Mail.ru Group

• Блог компании Mail.ru Group,
• Учебный процесс в IT,
• Карьера в IT-индустрии

Прошло уже почти 10 лет с момента запуска первого образовательного проекта Mail.ru Group — Технопарка. А в этом году их будет уже девять: мы добавили еще 2 вуза в Москве и Калининграде. Сейчас специализации действуют в 5 городах. В осеннем семестре мы ожидаем около 1000 студентов на 65 программах обучения. Все программы разработаны и проводятся сотрудниками нашей компании. Обучение как всегда бесплатно, а поступление происходит на конкурсной основе. 

Читать дальше →

sismetanin 31 августа 2020 в 17:15

Анализ тональности в русскоязычных текстах, часть 2: основные исследования

• Блог компании Mail.ru Group,
• Машинное обучение,
• Научно-популярное,
• Социальные сети и сообщества

Исследователи применяли анализ тональности для совершенно разных русскоязычных текстов: постов из соцсетей, отзывов, новостных статей и книг. Как следствие, результаты их исследований тоже были совершенно разными и крайне интересными. Например, кто бы мог подумать, что тексты с положительной тональностью делают обучение иностранному языку более интересным, но менее эффективным? В этой серии статей мы рассмотрим, как и для каких целей применялись подходы анализа тональности для русскоязычных текстов, каких результатов удалось достичь, какие проблемы возникали, а также немного поговорим о перспективных направлениях.

В отличие от предыдущих работ я сосредоточился на прикладном применении, а не на самих подходах и их качестве классификации. В первой статье мы обсудили, что такое «анализ тональности», какой он бывает и как его за последние 8 лет применяли для анализа русскоязычных текстов. В этой части мы детально рассмотрим каждое из 32 основных исследований, которые мне удалось найти. В третьей и заключительной части (будет на следующей неделе) поговорим об общих сложностях, с которыми сталкивались исследователи, а также о перспективных направлениях на будущее.

Читать дальше →

randall 28 августа 2020 в 14:41

Визуализация хаоса: как представляют аттракторы динамических систем

• Блог компании Mail.ru Group,
• Математика,
• Визуализация данных,
• Научно-популярное

(с)

Среди ученых ходит байка о нетривиальном способе сделать свой доклад интересным и увлекательным. Во время выступления нужно выбрать в зале самого недоумевающего, самого потерянного слушателя, и рассказывать персонально ему, да так, чтобы зажечь в глазах огонек интереса.

Еще известен афоризм, приписываемый физику Ричарду Фейнману: «Если вы ученый, квантовый физик, и не можете в двух словах объяснить пятилетнему ребенку, чем вы занимаетесь, — вы шарлатан».

Доступно объяснять устройство сложных вещей — великий навык, однако бывают истории, о которые сломает язык даже самый искусный оратор. Теория динамических систем – вот та область, где без визуализации чувствуешь себя слепым садовником в окружении колючих, увенчанных шипами растений.

Сложные непериодические режимы поведения динамических систем можно описать непериодическими траекториями — так называемыми странными аттракторами, имеющими фрактальную структуру. Сегодня покажем, как визуализируют поведение странных и некоторых других аттракторов.

Читать дальше →

sismetanin 27 августа 2020 в 17:51

Анализ тональности в русскоязычных текстах, часть 1: введение

• Блог компании Mail.ru Group,
• Семантика,
• Big Data,
• Машинное обучение,
• Социальные сети и сообщества

Анализ тональности стал мощным инструментом для масштабной обработки мнений, выражаемых в любых текстовых источниках. Практическое применение этого инструмента в английском языке довольно развито, чего не скажешь о русском. В этой серии статей мы рассмотрим, как и для каких целей применялись подходы анализа тональности для русскоязычных текстов, какие результаты удалось достичь, какие проблемы возникали, а также немного поговорим о перспективных направлениях. В отличие от предыдущих работ, я сосредоточился на прикладном применении, а не на самих подходах и их качестве классификации. Первая часть — вводная. Мы рассмотрим, что такое «анализ тональности», какой он бывает и как его за последние 8 лет применяли для анализа русскоязычных текстов. Во второй части детально рассмотрим каждое из 32 основных исследований, которые мне удалось найти. В третьей и заключительной части (опять же, будет на следующей неделе) поговорим об общих сложностях, с которыми сталкивались исследователи, а также о перспективных направлениях на будущее.

Читать дальше →

pxeno 21 августа 2020 в 18:00

Как машинное обучение и искусственный интеллект ускоряют поиск новых лекарств

• Блог компании Mail.ru Group,
• Машинное обучение,
• Искусственный интеллект

• Перевод

The light inside me by Wilvarin-Liadon

Команда Mail.ru Cloud Solutions перевела в сокращенном варианте эссе Кевина Ву, который рассуждает о том, чего уже добилась фармацевтическая промышленность и здравоохранение с помощью искусственного интеллекта и машинного обучения, а также когда новые технологии помогут найти лекарства от всех болезней.

Читать дальше →

AloneCoder 20 августа 2020 в 12:40

Модернизация старого PHP-приложения

• Блог компании Mail.ru Group,
• Разработка веб-сайтов,
• PHP,
• Программирование,
• Проектирование и рефакторинг

• Перевод
• Tutorial

Недавно мне выдалась случайная возможность поработать с несколькими старыми PHP-приложениями. Я заметил несколько распространённых антипаттернов, которые пришлось исправлять. Эта статья не о том, как переписывать старое PHP-приложение на <вставьте сюда название чудесного фреймворка>, а о том, как сделать его более удобным в сопровождении и менее хлопотным в работе.

Читать дальше →

pxeno 19 августа 2020 в 18:00

Как спокойно спать, когда у вас облачный сервис: основные архитектурные советы

• Блог компании Mail.ru Group,
• Системное администрирование,
• DevOps,
• Облачные сервисы

• Перевод

LOST by sophiagworld

В этой статье собраны некоторые общие шаблоны, помогающие инженерам работать с масштабными сервисами, к которым делают запросы миллионы пользователей. 

По опыту автора, это не исчерпывающий список, но действительно эффективные советы. Итак, начнем.

Переведено при поддержке Mail.ru Cloud Solutions.

Читать дальше →

z3apa3a 19 августа 2020 в 12:29

Почта Mail.ru начинает в тестовом режиме применять политики MTA-STS

• Блог компании Mail.ru Group,
• Информационная безопасность,
• IT-стандарты,
• Серверное администрирование

Если кратко, то MTA-STS — это способ дополнительно защитить письма от перехвата (т.е. атак злоумышленник-в-середине aka MitM) при передаче между почтовыми серверами. Он частично решает унаследованные архитектурные проблемы протоколов электронной почты и описан в относительно свежем стандарте RFC 8461. Почта Mail.ru — первая крупная почтовая служба в Рунете, реализующая данный стандарт. А более подробно рассказывается уже под катом.

Читать дальше →

Как мы побеждаем неопределенность в Delivery Club

• Блог компании Mail.ru Group,
• Блог компании Delivery Club Tech,
• Разработка под e-commerce,
• Исследования и прогнозы в IT,
• Управление e-commerce

Друзья, всем привет! Меня зовут Коля Архипов, я отвечаю за Research & Development в Delivery Club.

Наша команда решает наукоёмкие задачи внутри FoodTech-платформы: мы разрабатываем компоненты, основанные на алгоритмах и данных, которых в платформе DС много. В процессе решения мы сталкиваемся со множеством неопределенностей как со стороны бизнеса, так и со стороны разработки.

Материал получился объёмным и, я надеюсь, полезным для вас. Поэтому рекомендую поставить чайничек и заварить вкусный кофе, я сделал так сам, пока работал над этой статьей.

Сегодня расскажу о гонке, которую наша команда прошла за последний год. Аналогия возникла сама собой — мы работаем в очень динамичной компании, лидере рынка FoodTech в России. Мы стремительно развиваем разные направления бизнеса, и это действительно драйвит! Мы не только успешно пришли к финишу, но и получили много инсайтов в процессе «гонки». Этим и хочу поделиться с вами.

Статья появилась после доклада на конференции РИТ++ 2020. Для тех, кто любит видео, — ищите его в конце статьи.

Читать дальше →

Лучшие практики bash-скриптов: краткое руководство по надежным и производительным скриптам bash

• Блог компании Mail.ru Group,
• Системное администрирование,
• *nix

• Перевод

Shell wallpaper by manapi

Отладка сценариев bash — это как поиск иголки в стоге сена, тем более, когда новые дополнения появляются в существующей кодовой базе без своевременного рассмотрения вопросов структуры, логирования и надежности. В таких ситуациях можно оказаться как из-за собственных ошибок, так и при управлении сложными нагромождениями скриптов.

Команда Mail.ru Cloud Solutions перевела статью с рекомендациям, благодаря которым вы сможете лучше писать, отлаживать и поддерживать свои сценарии. Хотите верьте, хотите нет, но ничто не может сравниться с удовлетворением от написания чистого, готового к использованию bash-кода, который работает каждый раз.

В статье автор делится тем, что узнал за последние несколько лет, а также некоторыми распространенными ошибками, которые заставали его врасплох. Это важно, потому что каждый разработчик программного обеспечения в определенный момент своей карьеры работает со сценариями для автоматизации рутинных рабочих задач.

Читать дальше →

pxeno 15 августа 2020 в 12:06

Что происходит, когда вы обновляете свой DNS

• Блог компании Mail.ru Group,
• Системное администрирование,
• Сетевые технологии,
• Серверное администрирование

• Перевод

Fenix by Takeda11

Многие путаются в обновлении записей DNS, когда изменяют IP-адрес своего сайта. Почему эти записи медленно обновляются? Неужели действительно нужно ждать два дня, чтобы всё обновилось? Почему одни посетители видят новый IP, а другие — старый?

Команда Mail.ru Cloud Solutions перевела статью разработчика и автора статей Джулии Эванс, где она отвечает на эти вопросы и популярно рассказывает, что происходит во время обновления DNS с точки зрения фронтендера.

Читать дальше →

AloneCoder 14 августа 2020 в 13:48

Почему язык С не помешает вам делать ошибки

• Блог компании Mail.ru Group,
• Программирование,
• Отладка,
• C

• Перевод

Если вкратце: потому что мы так сказали.

:)

Ладно, это слишком короткое объяснение для статьи, дорогой читатель, и мои провокационные слова требуют объяснения.

Встреча Комитета по языку С — которую сначала планировали провести в германском Фрайбурге, но не срослось по понятным причинам, — завершилась 7 августа. Она прошла хорошо, мы продвинулись по всем фронтам. Да, мы действительно продвигаемся, уверяю вас, и язык С не умер.

Читать дальше →

randall 14 августа 2020 в 10:07

Сонм разумов: актуальные барьеры и трамплины на пути создания общего ИИ

• Блог компании Mail.ru Group,
• Научно-популярное,
• Искусственный интеллект

(c) 

Проекты создания общего искусственного интеллекта (Artificial General Intelligence, AGI), о которых сегодня пойдет речь, считаются менее амбициозными, чем любой сильный ИИ. Однако некоторые ученые утверждают, что компьютеры никогда не смогут получить возможности человеческого интеллекта.

Как у сторонников, так и у противников идеи о компьютерах, способных решить любую подвластную человеку интеллектуальную задачу, найдется немало аргументов в защиту своей позиции. Узнаем, какие доводы приводит каждая из сторон, и попробуем разобраться, есть ли шанс у AGI сейчас и в будущем.

Статья основана на недавней публикации профессора Рагнара Фьелланда «Почему ИИ общего назначения не будет создан», но мы будем рассматривать не только аргументы «против». 

Читать дальше →

pxeno 12 августа 2020 в 18:00

5 алгоритмов регрессии в машинном обучении, о которых вам следует знать

• Блог компании Mail.ru Group,
• Алгоритмы,
• Машинное обучение

• Перевод

Источник: Vecteezy

Да, линейная регрессия не единственная

Быстренько назовите пять алгоритмов машинного обучения.

Вряд ли вы назовете много алгоритмов регрессии. В конце концов, единственным широко распространенным алгоритмом регрессии является линейная регрессия, главным образом из-за ее простоты. Однако линейная регрессия часто неприменима к реальным данным из-за слишком ограниченных возможностей и ограниченной свободы маневра. Ее часто используют только в качестве базовой модели для оценки и сравнения с новыми подходами в исследованиях.

Команда Mail.ru Cloud Solutions перевела статью, автор которой описывает 5 алгоритмов регрессии. Их стоит иметь в своем наборе инструментов наряду с популярными алгоритмами классификации, такими как SVM, дерево решений и нейронные сети.

Читать дальше →

racktear 12 августа 2020 в 17:37

День рождения Tarantool. Принимаем поздравления

• Блог компании Mail.ru Group,
• IT-инфраструктура,
• Администрирование баз данных,
• Хранение данных

Собственной базе данных Mail.ru Group уже 12 лет! В этом посте я поделюсь успехами команды. За последний год мы выросли до 70 человек, сделали синхронную репликацию, управление кластером и получили новых крутых заказчиков. Нас много, потому что к Tarantool большой интерес в России. Если вы что-то в нашей стране оплачиваете, велика вероятность, что ваши данные проходят через нашу базу.

Читать дальше →

Разделяй и властвуй. Модульное приложение из монолита на Objective-C и Swift

• Блог компании Mail.ru Group,
• Блог компании Delivery Club Tech,
• Разработка под iOS,
• Objective C,
• Swift

Привет, Хабр! Меня зовут Василий Козлов, я iOS-техлид в Delivery Club, и застал проект в его монолитном виде. Признаюсь, что приложил руку к тому, борьбе с чем посвящена эта статья, но раскаялся и трансформировал своё сознание вместе с проектом.

Я хочу рассказать, как разбивал существующий проект на Objective-C и Swift на отдельные модули — framework’и. Согласно Apple, framework — это директория определенной структуры.

Изначально мы поставили цель: обособить код, реализующий функцию чата для поддержки пользователей, и уменьшить длительность сборки. Это привело к полезным последствиям, которым сложно следовать, не имея привычки и существуя в монолитном мире одного проекта.

Читать дальше →

PeterZaitsev 10 августа 2020 в 18:00

Как собрать гибридное облако с помощью Kubernetes, которое может заменить DBaaS

• Блог компании Mail.ru Group,
• MySQL,
• Облачные вычисления,
• MongoDB,
• Kubernetes

Уголок фантастики, версия «первое полугодие 2020»

• Блог компании Mail.ru Group,
• Космонавтика,
• Научная фантастика

Х/ф «Спутник»

Недавно мы перевалили через середину 2020-го. И хотя карантин попортил планы всем, кому только можно, однако искусство не задушишь. Несмотря на закрытия кинотеатров и срывы съёмок и премьер, за первое полугодие вышли любопытные фантастические фильмы. Некоторые из них попали в нашу подборку.

Приятного просмотра!

codesign 6 августа 2020 в 19:00

Архитектура S3: 3 года эволюции Mail.ru Cloud Storage

• Блог компании Mail.ru Group,
• Администрирование баз данных,
• Хранение данных,
• Хранилища данных

racktear 6 августа 2020 в 13:14

Надежный выбор лидера в Tarantool Cartridge

• Блог компании Mail.ru Group,
• Высокая производительность,
• Анализ и проектирование систем,
• Администрирование баз данных

Сегодня я немного расскажу о том, какие есть мысли по поводу фейловера в tarantool/cartridge. Сначала пару слов про то, что такое cartridge: это кусок lua-кода, который работает внутри tarantool и объединяет тарантулы друг с другом в один условный «кластер». Это происходит за счет двух вещей:

• каждый тарантул знает сетевые адреса всех других тарантулов;
• тарантулы регулярно «пингуют» друг друга через UDP, чтобы понять кто жив, а кто нет. Тут я намеренно немного упрощаю, алгоритм пинга сложнее чем просто request-response, но это для разбора не сильно принципиально. Если интересно — погуглите алгоритм SWIM.

Внутри кластера все обычно разделяется на тарантулы «с состоянием» (master/replica) и «без состояния» (router). Тарантулы «с состоянием» ответственны за хранение данных, а тарантулы «без состояния» — за маршрутизацию запросов.

Читать дальше →