ОсновноеRadiotalkПользовательское
MyRadio24 - Хостинг для создания интернет радио
91   •   Посмотреть все темы

Ошибки, тех. работы и другие проблемы с радио (помощь)

 

20090
Dimitry @Dimitry
Пришло время обновления ОС на всех серверах до новой версии.
Данные технические работы являются самыми сложными и проводятся каждые 2 года. Ориентировочное время отключения вещающих серверов 10-20 минут - если не возникнет ЧП. При обновлении главного сервера MyRadio24 все станции будут недоступны. Чтобы уменьшить риски возникновения ЧП с главным сервером, весь софт будет заранее протестирован на новой версии сервера.
Обновления будут проводиться ориентировочно: 25.-27. августа с 01:00 до 03:00 по МСК
Если обновления будут проходить плавно и без ЧП, постараемся выполнить быстро. О процессе обновления можно будет прочитать в этой теме.
-------------------------------------------------------
Процесс обновления
24.08. весь день - подготовка к обновлению и тестирование ПО
25.08. 01:00 MSK - обновление сервера listen1 (оффлайн всего 5 мин)
25.08. 01:25 MSK - обновление остальных listen (оффлайн всего 5 мин)
25.08. 01:30 MSK - после перезапуска завис listen2 (оффлайн +35 минут)
25.08. 02:00 MSK - обновление главного сервера (оффлайн 5 минут)
25.08. 02:05 MSK - радиостанции с AutoDJ PRO не запустились (для них оффлайн +7 минут)
25.08. 02:12 MSK - все работы завершены, проверка всех сервисов и работы станций

Итого: Обновления проходили хорошо, поэтому были выполнены за один подход. К сожалению в процессе обновления сервер listen2 завис и был недоступен 40 минут. Все остальные сервера были суммарно недоступны около 5-10 минут. Станции на тарифах PRO были недоступны дополнительные 7 минут. (кодировщик не запускался)

При обнаружении проблем после обновления - пишите в эту тему.

20090
Dimitry @Dimitry
Добавил 2 исправления, нужно перезапустить радио чтобы вступило в силу.
- добавил больше циклов чтобы удалось прочитать 500кб тегов, не должно появляться
ERROR[4357962]: Not all ID3 data readed
- исправил проверку последнего фрейма, это уменьшит кол-во ошибок вида:
ERROR[912330]: No frame at seek=8152 blockEncoded ...

20090
Dimitry @Dimitry
Cегодня с 23:00 периодически наблюдаются проблемы с доступом к серверам. Сами сервера работают исправно, проблемы на стороне Дата-Центра с каналами связи.

20090
Dimitry @Dimitry
Maintenance at backbone connection between Frankfurt - Falkenstein

На маршруте от нашего Дата-Центра проводятся работы - о работах почему-то не сообщили. Видимо не ожидали что вся сеть загнётся. Около часа все сайты открываются с трудом, станции заикаются. Сейчас уже лучше - станции звучат. Но исходя из новости работы будут до обеда 16го числа. К сожалению ничего сделать нельзя, только надеяться что сеть не будет так перегружена и маршруты перенаправят на менее загруженные.
-----------------
Добавлено: 16го заметных проблем не было, работы на маршруте выполнены.

20090
Dimitry @Dimitry
Проблемы в Дата-Центре

В 07:05 по МСК примерно на 2 часа пропала связь с некоторыми нашими серверами. К сожалению среди этих серверов был также и файловый сервер - из-за чего не работали все радиостанции с Auto-DJ. На данный момент работа восстановлена. Если кто-то менял сервер вещания на другой, необходимо сменить на тот что был ранее и перезапустить радио. Просим отнестись с пониманием к данному ЧП, подобные проблемы возникают во всех Дата-Центрах, при чём наш один из самых стабильных.
--------------------------------------
Добавлено:
Пришёл ответ из Дата-Центра. Из-за проблемы с соседним сервером, выбило предохранители на наши 2 сервера. Поменяли и перезапустили.
(Сервера: Файловый, listen5 + Mpchat)

20090
Dimitry @Dimitry
Сегодня после 15:30 по МСК на одной станции произошёл сбой в обработке данных.
Это повлекло цепную реакции и у некоторых станций данные в файле status.json не всегда обновлялись. В истории отсутствует часть данных. Также могли быть сбои в расписании. Проблема уже исправлена, наблюдаем всё ли ок.

20090
Dimitry @Dimitry
!!! Замена главного сервера на более мощный !!!

Намечаются глобальные технические работы - переезд главного сервера Myradio24 по причине высокой нагрузки от видеотрансляций - наш сервер приблизился к границе перегруженности.

Работы будут проведены ориентировочно в ночь 8 или 9 декабря. Когда будет известно точное время, информация будет обновлена в этой теме. Если что-то будет не готово, работы будут перенесены.

Попытаемся сделать переезд максимально незаметным.
Ориентировочное время работ 2 часа. Админ панель работать не будет. Транслирующие сервера в обновлении не участвуют и продолжат работать.
Радиостанции вещающие LIVE могут работать с перебоями. Радиостанции с Auto-DJ вероятно просто будут перезапущены с другого сервера без особых сбоев. Статистика может быть не полной. После обновления могут возникать различные проблемы, но будут быстро исправлены.


08.12.22 00:00 MSK - начало работ
08.12.22 00:30 MSK - основные работы завершены (все службы запущены)
08.12.22 01:00 MSK - практически все LIVE вновь вещают
08.12.22 01:50 MSK - перезагружены все транслирующие сервера (для сброса DNS)
Auto-DJ и соответветвенно все станции не работали около 2х минут.
LIVE вещание у всех восстановилось по разному в течении часа. (из-за DNS)
Надеемся, что данный сервер будет работать также стабильно без сбоев.

20090
Dimitry @Dimitry
Обнаружена новая проблема - появилась в начале декабря в новой версии Auto-DJ.
У некоторых радиостанций на тарифах PRO вещающих LIVE увеличивается буфер/задержка которая может доходить до 1-2 минут рассинхронизации. Проблема уже исправлена. В полночь будет перезагружен Auto-DJ для таких радиостанций.

20090
Dimitry @Dimitry
При обновлении пакетов на сервере сегодня в час дня по МСК произошёл сбой при котором все Auto-DJ отключились и были автоматически перезапущены. Так как перезапуск станций осуществлялся последовательно, то некоторые станции могли не работать до 2х минут. Причина отключения уже найдена и будет исправлена - чтобы подобное не повторялось в будущем.

20090
Dimitry @Dimitry
Исправлена критическая ошибка, из-за которой вещание и ретрансляции периодически перезапускались. (в эфире могла возникать тишина)
Проблема затронула около 20-30 радиостанций.
Данная ошибка возникла 3 недели назад, но о ней нам сообщили лишь сегодня.

20090
Dimitry @Dimitry
Сегодня у некоторых возникают проблемы с доступом к главному серверу.
По кол-ву слушателей просадки не заметно, но некоторые не могут вещать лайв, соединение обрывается. Возможно как то связано с южным регионом РФ. (Краснодар / Самара) Изучаем ситуацию. Обсуждение тут:
https://vmeste.eu/forum?tid=18570

20090
Dimitry @Dimitry
Исправлена проблема для новых браузеров при вещании через браузер в LIVE 2.0.
Если музыка или микрофон были неактивны около 10 сек, то сервер отключал ведущего и пробовал подключить заново. Теперь при тишине вещание не прерывается.

20090
Dimitry @Dimitry
Информация для тех кто использовал API ссылку (тарифы PRO)

Из-за перехода на новый API формат, если вы использовали запросы для получения информации о радио или стола заказов по ссылке с ключом, необходимо обновить ссылку для таких запросов. Нужно заменить в ссылке красное на зелёное:
1. getinfo=1 на act=getinfo
2. gettable=1 на act=gettable

После доработки нового API, почти все действия доступные в админке можно будет выполнять также по API.

20090
Dimitry @Dimitry
Технические работы

В эту полночь, ориентировочно 2го июля в 00:00 будут проводиться технические работы.
Будут выполнены следующие действия:

1. Обновление пакетов серверов.
Главный сайт может быть не доступен пару минут, на вещание это не повлияет.

2. Перезагрузка всех Auto-DJ.
Произойдёт автоматическая плавная смена трека, слушателей при этом наш сервер не отключит. (бесперебойное вещание наша фишка)

3. Перезапуск LIVE сервера и всех вещающих серверов.
К сожалению после этого произойдёт сброс всех подключений, но это не проблема, наши плееры в течении 5 секунд подключат всех слушателей повторно. Другие плееры скорее всего тоже.
(полную перезагрузку мы совершаем не чаще 2х раз в год)

5
Vladimir @Voice
Снова сбросы сегодня, раз в 20 минут.... теряем слушателей из-за них... Что снова за проблемы? Вроде и денег за это платим, хотелось бы стабильности....

Отредактировано Voice - 23.07.2023
20090
Dimitry @Dimitry
Voice пишет:

Снова сбросы сегодня, раз в 20 минут.... теряем слушателей из-за них... Что снова за проблемы? Вроде и денег за это платим, хотелось бы стабильности....

Нам бы тоже этого хотелось, ведь мы тоже платим деньги за сервера и каналы.
Проблема скорее всего локальная в вашем регионе или у провайдера.
Глобальных просадков нет и по слушателям и в лайв вещании.

8
Seryoga @seryogausilitel
Не знаю, даже если и бывают капризы с прерыванием сервера, но моё мнение о MyRadio24 лучший из серверов для вещания! Есть все настройки для комфортного пользования! Ни один другой сервер Вам такого не предоставить.Я пробовал многие сервера, но на 24 есть всё под рукой так сказать!)))) Продумали до мелочей!))) Держать такие ресурсы огромный труд, стальные нервы!))) Мы держим ондно два радио, 24 держит Нас всех!

20090
Dimitry @Dimitry
Глобальные технические работы по обновлению ОС и замене серверов

Обратите внимание на то, что интервал подобных работ примерно каждые 2 года. Такие работы проводятся в полночь или ночью. Будет 1-2 раза перезагрузка серверов, каждый сервер не будет работать около 5 минут. Иногда возможно отключение отдельных служб или сайтов примерно на 30 минут. Иногда возможны ЧП при котором один из серверов может не работать долгое время до решения проблем. В этом сообщение будет вся актуальная информация о проведении данных работ. Если для вас не критичны ночные технические работы, можете дальше не читать.

Технические работы по обновлению ОС

✓ Подготовка к обновлению ОС серверов завершена.
✓ Рассылка о работах отправлена утром 16 октября.
✓ Работы завершены, все сервера обновлены.
✓ РЕЗУЛЬТАТЫ: Технические работы как и планировалось начались 18. октября в 01:00 MSK. Уже через 30 минут были завершены все обновления, но после перезагрузки серверов, 3 сервера не перезагрузились автоматически. Совместно с поддержкой Дата-Центра listen5 удалось запустить через 15 минут, listen1 и listen2 только через час. :(

Технические работы по замене серверов

✓ Тестирование железа новых серверов завершено.
✓ Рассылка о работах отправлена 20 октября.
✓ Настройка новых серверов и подготовка к переносу данных.
22. октября завершён перенос listen1 / listen2 / listen5 / listen7 / s02 (mp)
23. октября завершён перенос s01 / s03
24. октября завершён перенос vmeste (всё работает стабильно)

ВАЖНО! Во время замены на некоторых серверах будут изменены IP и из-за обновления DNS у некоторых (старых посетителей) может пропасть доступ к серверам примерно на 30-60 минут. Новые посетители зайдут сразу на новые сервера. Если ваши сайты на сервере s01 или s02 (mp) работают без нашего DNS, то после переноса в DNS ваших доменов у регистратора необходимо указать новые IP:
s01 новый IP 136.243.9.88
s02 (mp) новый IP 136.243.9.91

Небольшое ЧП. 19. октября в 16:06 главный сервер радио сам перезапустился.
Причины не найдены, но есть подозрение что в ДЦ сотрудник не тот сервер перезагрузил.

Все работы завершены в ночь 24. октября.
Если заметили проблемы в работе, сообщите нам.

20090
Dimitry @Dimitry
Провели глубокое тестирование стабильности видеоретрансляций

На данный момент все сервисы (кроме YouTube) выдерживают сбои и не прерывают трансляцию. Даже если отключить радио на несколько минут, а потом включить - видеотрансляция сама возобновится. Трансляции на ВК, ОК, Телеграм и другие сервисы, работают месяцами без проблем.

С Youtube всё немного иначе, как только ваша станция перестанет работать более чем на 1 минуту, Youtube полностью завершает трансляцию. Это также возможно когда мы проводим масштабные технические работы либо возникают технические неполадки. Поэтому, теперь мы постараемся сообщать о том, когда необходимо проверить работоспособность видеотрансляции.

Небольшой сбой был у нас 8го февраля и вероятно в этот день прервались все трансляции на Youtube. Подобные сбои, как и масштабные технические работы, у нас бывают примерно 1-2 раза в год. Поэтому трансляции на Youtube должны также работать несколько месяцев без проблем.

20090
Dimitry @Dimitry
Примерно в 13:30 по MSK был сбой на всём сервисе.
Около 15 минут сайт не был доступен и большинство станций не звучали.

ВАЖНО! Если вы используете ретрансляции на YouTube, вам необходимо проверить и перезапустить их. К сожалению при любых сбоях YouTube полностью завершает трансляцию.