Sergey Cellinsky
Sergey Cellinsky личный блог
24 апреля 2019, 19:32

tslab шалит

Tslab отчудил по новому. Один из типов мониторинга, занимается тем, что читает все строчки в логе по мере их появление и разбирает на известные структуры. Есть самая общая, это то, что строка всегда начинает с отметки времени и данных после. Собственно агент смотрит на время, и если отставание от системного больше чем на 3 минуты, то отдается авария, причем снятие этого параметра идет в активном режиме. То есть машина расположенная вне торгового vps, цепляется на сетевой порт и снимает показания датчика. Это сделано на случай, если тслаб например глухо подвис (были прецеденты) или когда у хостера пропадает интернет (тоже были прецеденты). Последний случай самый чудный, ибо мониторинг на самой машине с tslab рад-бы крикнуть, что дело дрянь, да не может — интернета нету и ты никогда не узнаешь, что торговлей писец. Если только не держать постоянно соединение, что достаточно затруднительно, если ты не пялишся в монитор весь рабочий день. Так вот, неожиданно приходит авария. Агент отвечает, но как-то бессвязно, не вижу, говорит, отметки о времени и посчитать дельту следовательно не могу. Заглядываю,  а там вот такая картина в логе:

tslab шалит

Видны ошметки от среды сборки судя по всему (TeamCity) и пачки ошибок. Рестарт, как говорится помог, но такой вариант глюка встречаю впервые за несколько лет. Как говорится, будьте бдительны. Не смотря на то, что визуально всё было живо, реально — не очень. Свихнувшийся робот, это последний кандидат, которому хотелось бы доверить торговлю.

26 Комментариев
  • Дмитрий Ш
    24 апреля 2019, 19:44


  • ves2010
    24 апреля 2019, 20:03
    1 у тслаба есть техподдержка… делаешь дамп памяти с зависшей прогой и шлешь разрабам
    2 делай так — настрой письма по сообщениям на пересчет скрипта… тебе на каждый пересчет будет падать письмо на почту… на смартфон поставь почтовый клиент… на каждое письмо он будет пищать… и легко будет посмотреть работает тслаб или отвалился
  • ch5oh
    24 апреля 2019, 20:39

    А что за поставщик? СмартКОМ, кажется?

    Так, может, это смартком выпендрился экзотически?

    У них сегодня был сбой на основном торговом контуре утром.

  • П М
    24 апреля 2019, 23:36
    Это стектрейс обычный, надо смотреть верхнюю строку

Активные форумы
Что сейчас обсуждают

Старый дизайн
Старый
дизайн