Новый механизм выгрузки единого реестра от РосКомНадзора

Добрый день!

Последний месяц Carbon Soft совместно с Роскомадзором плотно тестирует новый способ выгрузки списка запрещённых сайтов. На текущий момент в тестировании приняли участие 10 операторов связи, использующих Carbon Reductor DPI.

Что представляет из себя новый способ выгрузки реестра

В отличие от обычного способа выгрузки реестра новый способ имеет 2 нововведения.

Получение изменений реестра производится с помощью пары логин/пароль через API Роскомнадзора. То есть ЭЦП (электронно-цифровая подпись) в новой системе на текущий момент не нужна. Однако избавляться от неё не нужно. ЭЦП может понадобиться для операторов связи впервые получающих доступ к порталу АС «Ревизор», возможно где-то ещё.

Теперь, помимо полной выгрузки реестра, периодически, раз в 5 минут, отслеживается появление небольших изменений — дельта-пакетов. После чего производится обновление правил фильтрации трафика в соответствии с данными из каждого дельта-пакета. Сам дельта-пакет на текущий момент представляет собой небольшие изменения в реестре Роскомнадзора, примерно от 1 до 10 записей (максимально до 300 ресурсов) и имеет формат аналогичный самому файлу реестра. Каждый дельта-пакет имеет свой идентификационный номер и время создания, по которому как раз и осуществляется проверка наличия новых изменений. Общая ежечасная выгрузка реестра запрещенных сайтов загружается операторами связи по существующим в настоящее время правилам.

Что даёт новый способ выгрузки

Во-первых, это даёт повышенную скорость загрузки и обработки списков, а также повысится эффективность и оперативность реагирования систем фильтрации на изменения в реестре, т.к. системе фильтрации не нужно скачивать весь список при наличии «дельт». С введением выгрузок по дельта-пакетам скорость скачки изменений повысится в разы, а серверу фильтрации нужно будет обработать только новые 5-10 URL, а не весь список как ранее. Новые URL добавятся в правила фильтрации мгновенно. Это делает ещё надёжней и оперативней работу системы фильтрации в целом.

Во-вторых, неудобства связанные с ЭЦП для выгрузки списков теперь исключены. Бывали случаи, что из-за просроченной подписи не происходила выгрузка списка запрещённых сайтов и, как следствие, пропуски фильтрации.

Когда будет переход на новый способ выгрузки списков

Роскомнадзор уже поддерживает 2 механизма выгрузки и продолжит в обозримом будущем. Возможно останется только новый способ выгрузки, но однозначно говорить об этом пока рано.

Возможность использования нового механизма выгрузки уже появилась в новой master-версии Carbon Reductor DPI 8. Изменения в 7-й версии появятся чуть позже, примерно через 2 месяца.

На текущий момент мы уже переводим на новую систему всех желающих. Просто оставьте заявку на портале HelpDesk о своём желании, инженеры технической поддержки Вам помогут. Техническая документация по настройке выгрузки списков также обновлена.

Получить логин и пароль можно в Роскомнадзоре (в случае использования собственной системы фильтрации трафика) или через представителя разработчика системы фильтрации трафика (если используете Carbon Reductor DPI).

Об изменениях в 7-й версии, а также любых других новостях мы сообщим дополнительно, поэтому оставайтесь на связи!


Спасибо, что пользуетесь Carbon Reductor DPI!

Опыт использования Carbon Billing 5 от интернет-провайдера «R-LINE ИНТЕРНЕТ»

Веб-сайт: www.38inet.ru
Главный инженер, Алексей Булавицкий.

Информация о проекте

Несколько тысяч абонентов. Биллинг в эксплуатации с мая 2017г.
Беседовал Денис Кучаев. Директор проекта Carbon Billing 5.

Процесс внедрения и опыт использования

Как пришли к тому, что понадобился биллинг?
Это не совсем корректный вопрос, так как интернет-оператор не может работать без биллинга. Это главный инструмент.
У нас был другой биллинг, назывался «микробил». Так как он нелицензированный (примечение, нет сертификата соответствия) от него пришлось отказаться. Плюс мы довольно сильно подросли вроде.

То есть, вы переносили базу с «микробила»?
Да, я базу переносил с «микробила».

А чем обусловлен выбор именно Carbon Billing 5? Может какие-то другие биллинги рассматривали?
Так. Как объяснить то… Получается, выбор был не очень большой. Исследовали эту тему довольно плотно. Выбор был: «Гидра», если не ошибаюсь, «Ланбиллинг», «Карбон Биллинг» и «Абилс». Только из этих выбирали.

Критерии: первый – это сертификация. Облачные биллинги откинули сразу – это не совсем удобно. Ну вот так. В основном: Сертификация, поддержка. «Абилс» вообще находится за рубежом.

Вы их тестировали?
Да, «Абилс» тестировал. «Карбон» ставил, тестировал, изучал. «Ланбиллинг» мне сразу отсоветовали – у нас есть просто компания, которая пользуется. Сразу его откинули. Выбор был не очень большой.

Как проходило внедрение? Сроки? Насколько активно помогала техподдержка биллинга при внедрении?
Внедрение проходило тяжело, скажем так. Скажем так, документация, которая у Вас есть не всегда соответствует действительности. В техподдержку старались обращаться по-минимуму, потому, что первое – так как мы ставим биллинг у себя, то в какой то мере нам его надо обслуживать, поэтому мы должны разбираться в биллинге. В критических случаях обращаемся к вам. В некритических мы разбираемся сами. Поэтому сроки затянулись.

Приблизительно, я сейчас скажу… Я где-то в феврале 2017 года установил его, а закончил с внедрением в первых числах мая, когда он уже в работу встал. Окончательно перенес последних абонентов 31-го июля.

То есть получается полгода.
По сути дела, да, это так. Торопиться смысла нет. Все равно надо знать, что, где, как — все нюансы.

После запуска в «продакшн», как проходит работа, как оцениваете техподдержку, ну и вообще, как дела?
Периодически есть проблемы. Техподдержка помогает, в принципе, довольно быстро, тут ничего не могу сказать. Может быть мы не всегда друг друга допонимаем, но, в принципе, ничего такого серьезного и конкретного я не могу сказать. А вообще, по какой шкале оценивать это все? Если так вот разобраться.

Если оценивать весь проект по десятибальной шкале, продукт вместе с техподдержкой и другими сторонами?
Ну где-то в 7+, недочеты в Вас присутствуют. Вы в рекламе обещали определенные доработки летом, но я на своем оборудовании физически до сих пор их не вижу. Обращался за этим в техподдержку – они сказали что доработка в нестабильной бета-версии. Хотя несколько версий уже сменилось. Вроде Вы идёте всё дальше и дальше по версиям и доработкам, но того функционала я ещё не дождался. А сейчас у меня почему-то перестали работать промо-тарифы. Автоматического переключения не происходит между ними.

Не работает – исправим, а по дальнейшему использования биллинга, какие планы? Может есть какой-то функционал каким еще не пользуетесь?
Планирую пользоваться… У меня сейчас будет запускаться интерактивное телевидение, в течение этого месяца буду запускать портал и буду сопрягать биллинг с порталом так, чтобы можно было регулировать. «Сталкер» портал, я так понимаю, работает у вас, но я «Сталкером» не буду пользоваться. Я буду работать с IPTV порталом. Есть поддержка?

Да, есть интеграция.
Меня момент этот очень сильно интересует, потому что я запускаю полностью телевидение в этом месяце.

Несли какие-нибудь дополнительные расходы на биллинг или техподдержку?
Нет, мы платили только за использование продукта, и всё.

Если резюмировать, проект успешен?
Да, в принципе, ничего плохого я не могу сказать. Я как бы когда изучал моменты, скажем так, по форумам, по интернету какие биллинги кто использует. Скажем так, о вас были не очень хорошие отзывы, периодически попадались. Я бы таких отзывов не написал.

Вспомнил забавную поговорку, прочитал в интернете: «Если о программном обеспечении нет плохих отзывов, значит программного обеспечения нет».
:) Да, недочеты, недоработки в любом продукте присутствуют. Но в целом проект удался. Просто надо совершенствоваться, работать над собой.


Спасибо, что выбрали Carbon Billing 5 и за интервью!

Отзыв о Carbon Reductor DPI от ООО «КОМТЕЛ»

Почему выбрали именно Carbon Reductor?

Ну, во-первых, мне посоветовали знакомые, сказали, что пользуются. Во-вторых, соотношение цена/качество вполне приемлемо.

На данный момент техническая поддержка Вас устраивает?

Да.

За всё время работы продукты не было пропусков?

Ну, наказывать, меня не наказывали. А так, я давно не мониторил. Наверное, нет.

Ваша оценка по десятибалльной шкале?

Ну, судя по тому, что я смотрю иногда, по тому, что там блокируется – в общем, на десятку!


Дик Павел Юрьевич, генеральный директор ООО «КОМТЕЛ»


Спасибо, что выбрали Carbon Reductor DPI!

График работы технической поддержки c 1 по 9 января 2018

Поддержка в новогодние праздники будет оказываться через портал HelpDesk.
Рекомендуем не проводить никаких работ до 9 января.

День Время работы (МСК)
1 — 3 января Выходной день
4 — 5 января* 8:00 — 16:00
6 — 8 января Выходной день
9 января 8:00 — 16:00

Круглосуточная поддержка по критичным вопросам оказывается в обычном режиме.
* 4-5 января техническая поддержка будет осуществляться для SLA Стандарт по критическим вопросам.
Также в случае форс-мажора на SLA Стандарт вы можете дать интернет всем

Отзыв о Carbon Reductor DPI от ООО «Навигатор-ТВ»

Почему выбрали именно Carbon Reductor?

Сейчас не помню. Где-то читал, на каких-то форумах и его выбрали. И цена у вас всегда была привлекательная. И когда тестировали, установка была простая и, как бы, техподдержка понравилась и поэтому выбрали.

На данный момент техническая поддержка Вас устраивает?

Да, вполне устраивает. Всё замечательно работает. У нас даже установлена пока что старая версия, семёрка, и всё замечательно работает. Вот, планируем как-нибудь перейти на восьмёрку. А замечаний со стороны Роскомнадзора тоже нет, поэтому, как бы, всё отлично.

За всё время работы продукты не было пропусков?

Ваш продукт Satellite вроде выдаёт, что есть пропуски, но Роскомнадзор эти пропуски не видит, так что всё нормально.

Есть ли у Вас предложения по улучшению функционала?

Ну, вот, мы бы хотели восьмёрку протестировать, т.е. поставить, перейти на восьмёрку и протестировать те функции, а там уже дальше поглядим, потому что там уже новый функционал.

Ваша оценка по десятибалльной шкале?

Ну, давайте десяточку поставим. Нам, как бы, всё нравится, всё устраивает.


Греков Евгений Николаевич, технический специалист ООО «Навигатор-ТВ»


Спасибо, что выбрали Carbon Reductor DPI!

Релиз Carbon Reductor DPI 8.01.05.1176

Добрый день! Традиционный ежемесячный релиз Carbon Reductor DPI уже готов. Пройдёмся по порядку в соответствии со списком изменений новой версии.

Самое важное

Оптимизирован алгоритм анализа HTTP трафика, уменьшено количество коллизий для популярных сайтов, что повысило производительность Вашего сервера. В результате максимальное время поиска запрошенного URL в списке запрещённых сайтов уменьшилось на 30% для этих сайтов. В абсолютной величине это время составляет 0,000021 секунды.

Теперь Carbon Reductor может сообщить о сбое в работе сервера даже при неработающих DNS серверах провайдера, которые прописаны в настройках ПО. Для этого на сервере фильтрации хранятся и обновляются IP адреса доменов Carbon Soft. К тому же, если Ваши DNS сервера не работают, мы сообщим Вам об этом.

Блокировка запрещённых ресурсов стала надёжнее за счёт того, что теперь на маршрутизаторе мы можем заблокировать большее количество ресурсов. Теперь отправка списков IP адресов на маршрутизаторы умеет использовать все списки IP адресов и подсетей и не ограничена только списком IP, который обязателен к блокировке по всем протоколам и портам.

Мониторинг

  • Теперь по умолчанию отчёты АС «Ревизор» запрашиваются только для текущей учётной записи. Опционально можно запрашивать отчёты по всем единицам АС «Ревизор», установленным в Вашей сети. Пригодится, если у Вас в сети установлено несколько АС «Ревизор».
  • Переработана система создания заявок по возможным сбоям на сервере фильтрации. Оглавление стало более информативным для администратора сервера, подробности вынесены в тело заявки.
  • В анализе отчётов АС «Ревизор» фраза «Мониторинг в указанную дату не проводился» распознавалась как ошибка. Исправлено.
  • Откорректирована работа теста проверки зацикливания https-proxy, когда одновременно на одном сервере работают https-proxy и страница-заглушка.

Прочее

  • Найдена и исправлена трудновоспроизводимая ошибка, касаемая работы белых списков для https-ресурсов, заблокированных по IP, при указании подсетей.
  • Исправлены небольшие недочеты в веб-интерфейсе.

Спасибо, что пользуетесь Carbon Reductor DPI!

Инсайдерская статистика фильтрации рунета с помощью Carbon Reductor DPI за 2017 год

Добрый день!

В начале осени Carbon Reductor DPI преодолел планку в 1000 операторов связи.

Теперь более половины рынка независимых провайдеров используют наше решение по фильтрации трафика.

На текущий момент Carbon Reductor DPI фильтрует 4,8 млн российских пользователей интернета. В секунду обрабатывается 180 гигабайт трафика.

За 2017 год операторами связи, использующими наше решение отфильтровано более 641 петабайт исходящего трафика или 18,9 квадриллионов сетевых пакетов.

Подробнее о Carbon Reductor DPI.


Спасибо, что пользуетесь продуктами Carbon Soft!

Опыт использования Carbon Billing 5 от интернет-провайдера ООО «Бархатный сезон»

г.Казань, республика Татарстан.
Марат Сатдинов, технический директор.

Информация о проекте

Внедрнение биллинга – декабрь 2014 г. В коммерческой эксплуатации 3 года на 01 декабря 2017 г.
До 1500 абонентов.

Беседовал Денис Кучаев. Директор проекта Carbon Billing 5.

Процесс внедрения и опыт использования

Как пришли к тому, что понадобился биллинг?
Занимались в Казани ИТ-аутсорсингом, решили попробовать новое направление – предоставление доступа в интернет. Зашли в посёлок в пригороде Казани. Это владельцы загородной недвижимости. Зашли в интернет, наткнулись на
Carbon Billing, почитали мануалы, почитали отзывы. Отзывы неплохие — решили внедрять.

То есть Ваши абоненты это дачники? Или владельцы элитной недвижимости?
Читать далее

Carbon Reductor DPI прошел тестирование Роскомнадзором

Добрый день!

Рады сообщить, что Carbon Reductor DPI успешно прошел тестирование Роскомнадзором и рекомендован к установке операторам связи по всей России как средство фильтрации трафика по спискам запрещённых сайтов и для выполнения ФЗ-139; ФЗ-149; ФЗ-187; ФЗ-398; ФЗ-436.

В тестировании приняло участие 22 оператора связи — самая большая выборка пользователей среди протестированных решений на рынке. По итогам у всех провайдеров, установивших систему фильтрации в соответствии с системными требованиями, достигнута 100% блокировка запрещённых сайтов и каких-либо нарушений или пропусков фильтрации за время тестирование не выявлено.

Подробная информация о Carbon Reductor DPI

Техническая документация по Carbon Reductor DPI


Спасибо, что пользуетесь Carbon Reductor DPI!

Релиз Carbon Reductor DPI 8.01.04 8244

Самое важное

Как Вы знаете, мы тщательно работаем над системой мониторинга сервера фильтрации каждый месяц. В этот раз мы значительно улучшили процесс обработки сообщений от мониторинга технической поддержкой.

Теперь техническая поддержка будет реагировать на потенциальные проблемы в несколько раз быстрее. Мы внедрили 3 дежурных специалиста, которые в круглосуточном режиме обрабатывают заявки от системы мониторинга, если такие возникают. О них при необходимости узнает вся цепочка специалистов с помощью системы критических оповещений, начиная от первого дежурного и заканчивая руководителем подразделения Carbon Reductor DPI — ни одна задача ни в коем случае не останется упущенной несмотря на текущее время суток.

Усовершенствован и анализ отчётов от АС «Ревизор». Carbon Reductor DPI уже умеет проверять отчёты, сформированные АС «Ревизор». Теперь Carbon Reductor автоматически инициирует формирование отчёта, анализирует сгенерированный отчёт и позже вновь проделывает ту же работу в рамках ежедневной проверки работоспособности системы фильтрации.

Веб-интерфейс

  • Исправлено отображение статистики по сетевым интерфейсам. Ранее не отображались графики по количеству проверенных пакетов, а также статистика по некоторым именам интерфейсов, при этом статистика оставалась доступна через консоль.
  • Откорректирована работоспособность изменения паролей пользователей.

Мониторинг

  • Добавлена система анализа факта блокировки трафика. Она позволяет определить, происходит ли блокировка запрещённых ресурсов на основе анализа обмена пакетами между самим запрещённым ресурсом и АС «Ревизор». Проверка происходит раз в 6 часов, а также сразу после обновления. При обнаружении аномалии система мониторинга оповестит техническую поддержку Carbon Soft и Вашего системного администратора.
  • Откорректирована работа теста времени работы сертификата для выгрузки единого реестра запрещённых сайтов.

Фильтрация

  • Согласована работа SNI-фильтрации с белыми списками, исправлены мелкие ошибки.
  • В некоторых случаях не работали белые списки для IP-адресов без указания масок — исправлено.

Прочее

  • Поведение системы обновления стало более правильным. Исправлены ошибка, которая разрешала обновление при его полном отключении. Однако нужно учитывать, что есть версии на которые необходимо обновляться. Такие версии выпускаются при критических изменениях, связанных, как правило, непосредственно с модулем фильтрации. Переход на такие обновления проходит в обязательном порядке вне зависимости от выбора опций.
  • Откорректирована обработка списков, проведены работы по повышению отказоустойчивости.
  • Исправлена автоматическая отправка новых маршрутов по BGP в интеграции с маршрутизаторами.

Спасибо, что пользуетесь Carbon Reductor!

Среди наших клиентов

Азимут Цифра 1 Завод РТА Инжинэт АЛРОСА УрФУ