19-20 октября прошел хакатон DataAudit, организованный Счетной палатой Российской Федерации, Сбербанком и АНО «Инфокультура». В соревновании участвовали 36 команд (и еще 4 — дистанционно) – это более 130 аналитиков, программистов, дизайнеров и проектных управленцев. Жюри назвало победителей в трех номинациях, специальные призы представили партнеры Data Audit. Рассказываем подробнее, какие идеи признали лучшими. Лучший программный продукт Команда DMAKI создавала сервис EmployersBanService, который по ИНН или наименованию компании (бюджетного учреждения) позволяет проследить размещает ли этот работодатель вакансии на портале «Работа в России». Команда выявила проблему: на известном рекрутинговом ресурсе hh.ru вакансий больше, чем в обязательной базе (619 тыс. против 487). Чтобы понять, какие…

Публикуем видео-запись дата-среды «Сбор данных и методология парирования блокировки роботов» из цикла «Большие данные в экономике». Спикер Сергей Бершадский работал в качестве backend-разработчика и системного архитектора с такими проектами, как медицинский портал ЕМИАС.инфо, Play2Live, toptal и др. Выступление посвящено особенностям извлечения данных из сайтов, их очистке и структуризации. Сергей поделился собственным опытом веб-скрейпинга с использованием библиотек python scrapy, beautiful soup, asyncio. Сергей также разобрал методы break-the-wall на примере запросов в Yandex и Google. Это подходы, которые позволяют имитировать браузер и автоматически его использовать. Презентация опубликована по ссылке. Смотрите запись дата-среды: Организаторами дата-среды выступили АНО «Инфокультура», Ассоциация участников рынка данных и РАНХиГС. Всем…

16-22 июня 2019 года состоялся хакатон «Цифровой рост», организованный РАНХиГС, АНО «Информационная культура» и Ассоциацией участников рынка данных. В хакатоне принимали участие выпускники бакалавриата ИТ-специальностей, а также начинающие специалисты, которые хотят продолжить свое обучение, повысить квалификацию и получить востребованное образование. Участники  соревновались в решении задач на машинное обучение и текстовый анализ, а также в создании различных проектов на основе открытых финансовых данных. На открытии хакатона Олег Сенько, ведущий научный сотрудник Федерального исследовательского центра «Информатика и управление» РАН, доктор физико-математических наук, прочитал участникам лекцию об анализе данных и машинном обучении. После чего эксперты и менторы хакатона рассказали подробнее о задачах и…