Вакансия: Разработчик WebCrawler и аналитик данных

Автор темы commfactor 
ОбъявленияПоследний пост
ОбъявлениеОткрыта свободная публикация вакансий для математиков26.09.2019 16:34
ОбъявлениеГранты для студентов и аспирантов мехмата и физфака МГУ на обучение в магистратуре Кембриджа 2023/202428.11.2022 13:56
ОбъявлениеВыпускник мехмата МГУ Алекс Герко стал крупнейшим налогоплательщиком Великобритании29.01.2023 00:21
12.11.2015 11:29
Вакансия: Разработчик WebCrawler и аналитик данных
Компания Фактор Связи, специализирующая на реализации Интернет-проектов ищет новых специалистов в свою команду.
Текущая команда Фактор связи имеет опыт разработки систем анализа данных об активности пользователей, позволяющих решать разнообразные задачи связанные с управлением клиентской базой, монетизацией данных, противодействия мошенничеству и рекламе.

Чем мы занимаемся?
1. Широкий спектр задач, связанных с анализом сетевого трафика и технологиями поиска информации в Интернет:
a. Перехват сетевого трафика и разбор в режиме реального времени
b. Реализация систем WebCrawling-а для сбора информации в Интернет
c. Построение отказоустойчивых высоконагруженных систем
d. Reverse-engeneering проприетарных сетевых протоколов и механизмов защиты от извлечения информации
2. Широкий спектр задач, связанных с аналитикой собираемых данных, BigData
a. Профилирование интересов интернет-пользователей
b. Геоаналитика
c. Реализация сервисов таргетирования рекламы
d. Создание моделей поведения интернет-пользователей
e. Построение графов связности интернет-пользователей
3. Активности связанных с разработкой под мобильные платформы
4. Реализация технологий анализа, распознавания и понимания человеческой речи

Обязанности
1. Выбор технологического стека решения задачи
2. Разработка системы WebCrawlin-га.
3. Разработка парсеров сетевых протоколов
4. Разработка ETL/ELT компонент
5. Разработка компонент технологического стека проектов Big Data
6. Разработка механизмов анализа данных
7. Разработка системы поддержки принятия решений и рекомендации
8. Проработка/реализация алгоритмов предобработки и анализа данных
9. Проектирование физической модели данных
10. Разработка механизмов интеграции источников данных, анализа и процессинга данных

Технические требования к кандидату
1. Опыт разработки на С++ и Python
2. Приветствуется знание скриптовых языков (bash, perl), языков высокого уровня (Java)
3. Понимание стандартных алгоритмов и структур данных
4. Владение основами отладки, диагностика и устранения возникающих ошибок
5. Понимание принципов оптимизации "бутылочных горлышек"
6. Понимание принципов построения многопоточного взаимодействия
7. Опыт работы с GNU Linux (командная строка, стандартные утилиты, базовые навыки администрирования)
8. Понимание основ сетевого взаимодействия, знание основных сетевых протоколов (модель ISO/OSI)
9. Понимание основных видов тестирования разрабатываемого ПО
10. Владение техническим английским языком, достаточным для чтения документации.
11. Приветствуется опыт работы и/или интеграции с БД PostgreSQL и др.
12. Умение работать с большими объемами данных: программная обработка и способность анализировать значительное количество информации
13. Знание технологического стека Hadoop и опыт работы с ним (Hive/Sqoop/Flume/Kafka/Strom, etc) будет преимуществом



Редактировалось 1 раз(а). Последний 14.11.2015 01:55.
16.11.2015 10:19
почта для связи
Для связи с нами пишите на почту info@commfactor.ru.
Извините, только зарегистрированные пользователи могут публиковать сообщения в этом форуме.

Кликните здесь, чтобы войти