Огромный трафик в sql

Всё, что не подходит под вышеперечисленные разделы

Модератор: immortal

Ответить
VladPTZ
Сообщения: 395
Зарегистрирован: Вт май 31, 2016 6:56 pm
Откуда: Россия Карелия Петрозаводск
Благодарил (а): 95 раз
Поблагодарили: 57 раз

Огромный трафик в sql

Сообщение VladPTZ » Сб апр 06, 2019 11:28 am

Screenshot_2019-04-06-11-20-05-454_com.android.browser.png
Screenshot_2019-04-06-11-20-05-454_com.android.browser.png (193.09 КБ) 4577 просмотров
У всех так? Откуда такой огромный трафик по гигабайт в час?
Флешки, а теперь и SSD диски летят раз в два три месяца
Сервер МД на x86 micro pc ssd + HDD, OC Debian, терминал Xiaomi Redmi note 7
Мои исходники для мд управляемых устройств https://github.com/vgamaev/ESPMDDEVICE
Аватара пользователя
xor
Сообщения: 2040
Зарегистрирован: Сб ноя 22, 2014 8:45 pm
Благодарил (а): 286 раз
Поблагодарили: 629 раз

Re: Огромный трафик в sql

Сообщение xor » Сб апр 06, 2019 1:02 pm

где же у вас гигабайт в час? 468 м, не?
у меня так
2019-04-06_13-01-53.png
2019-04-06_13-01-53.png (12.46 КБ) 4567 просмотров
Аватара пользователя
xor
Сообщения: 2040
Зарегистрирован: Сб ноя 22, 2014 8:45 pm
Благодарил (а): 286 раз
Поблагодарили: 629 раз

Re: Огромный трафик в sql

Сообщение xor » Сб апр 06, 2019 1:05 pm

2019-04-06_13-04-21.png
2019-04-06_13-04-21.png (41.68 КБ) 4567 просмотров
VladPTZ
Сообщения: 395
Зарегистрирован: Вт май 31, 2016 6:56 pm
Откуда: Россия Карелия Петрозаводск
Благодарил (а): 95 раз
Поблагодарили: 57 раз

Re: Огромный трафик в sql

Сообщение VladPTZ » Сб апр 06, 2019 1:28 pm

xor писал(а):
Сб апр 06, 2019 1:02 pm
где же у вас гигабайт в час? 468 м, не?
у меня так
2019-04-06_13-01-53.png
А не туда глянул, но все равно пол гига в час, за сутки 12 гигов, Как-то многовато. Почему? Не могут же датчики такой трафик генерировать.
Сервер МД на x86 micro pc ssd + HDD, OC Debian, терминал Xiaomi Redmi note 7
Мои исходники для мд управляемых устройств https://github.com/vgamaev/ESPMDDEVICE
Аватара пользователя
xor
Сообщения: 2040
Зарегистрирован: Сб ноя 22, 2014 8:45 pm
Благодарил (а): 286 раз
Поблагодарили: 629 раз

Re: Огромный трафик в sql

Сообщение xor » Сб апр 06, 2019 1:39 pm

VladPTZ писал(а):
Сб апр 06, 2019 1:28 pm
xor писал(а):
Сб апр 06, 2019 1:02 pm
где же у вас гигабайт в час? 468 м, не?
у меня так
2019-04-06_13-01-53.png
А не туда глянул, но все равно пол гига в час, за сутки 12 гигов, Как-то многовато. Почему? Не могут же датчики такой трафик генерировать.
циклы крутятся, gg/sg , таймеры, графики, страницы... это всё обращения к базе
Logrus
Сообщения: 2086
Зарегистрирован: Пт апр 07, 2017 12:20 pm
Благодарил (а): 313 раз
Поблагодарили: 458 раз

Re: Огромный трафик в sql

Сообщение Logrus » Сб апр 06, 2019 4:03 pm

весь код методов и скриптов в бд
Screenshot_2019-04-06-18-05-26.png
Screenshot_2019-04-06-18-05-26.png (127.9 КБ) 4549 просмотров
Screenshot_2019-04-06-18-04-56.png
Screenshot_2019-04-06-18-04-56.png (130.59 КБ) 4549 просмотров
Telegram | Блог
Raspberry Pi3, с образа от Сергея 3.31, PHP 7, флешка 16 Гб работает с 10.09.2017
Почти всё время уходит на исправление ошибок, оставшееся - на их повторение. (с) ))) Спасибо
dmsergei
Сообщения: 100
Зарегистрирован: Чт ноя 22, 2018 1:04 am
Благодарил (а): 3 раза
Поблагодарили: 2 раза

Re: Огромный трафик в sql

Сообщение dmsergei » Сб апр 06, 2019 8:33 pm

Да у Вас ещё все прекрасно :
12321.jpg
12321.jpg (78.61 КБ) 4511 просмотров
Аватара пользователя
nightwind
Сообщения: 333
Зарегистрирован: Вс июн 26, 2016 4:42 pm
Откуда: Барановичи
Благодарил (а): 28 раз
Поблагодарили: 52 раза
Контактная информация:

Re: Огромный трафик в sql

Сообщение nightwind » Вс апр 07, 2019 11:39 am

Друг, тут по 200 запросов в секунду из коробки. полгода назад я неделю просидел, оптимизируя это все, уменьшил до 50-70. Но чтобы сделать вменяемый уровень - надо переписывать ядро. Посмотри как сделаны циклы в модулях слип 1 секунда и по 100 всяких get/set global, включая удаление по времени) помню больше всего бессмысленно грузили таймеры, делая по 5 insert/delete в сукунду)
одно время выкладывал на гитхаб, да подзабил. приняли только один патч, который исправил десятки ненужных сортировок в секунду.

Подобавляй в базу индексов, оптимизируй кэширование. 90% запросов будут из кэша. Уменьшить износ это конечно не поможет, но хоть смотреться будет красивее))
Stor
Сообщения: 133
Зарегистрирован: Ср окт 31, 2018 11:45 pm
Благодарил (а): 8 раз
Поблагодарили: 4 раза

Re: Огромный трафик в sql

Сообщение Stor » Вт апр 09, 2019 11:10 pm

У меня также гененрируется много трафика:
Изображение

И еще вопрос - как поубивать спящие процессы - жрут ресурсы проца:
Изображение
Stor
Сообщения: 133
Зарегистрирован: Ср окт 31, 2018 11:45 pm
Благодарил (а): 8 раз
Поблагодарили: 4 раза

Re: Огромный трафик в sql

Сообщение Stor » Вт апр 09, 2019 11:46 pm

Отвечу на свой вопрос по большому количеству процессов. Внес следующие изменения и sleep процессы пропали:
В файле \etc\mysql\mariadb.conf.d\ изменить на:
slow_query_log_file = /var/log/mysql/mariadb-slow.log
long_query_time = 5
log_slow_rate_limit = 1000
query_cache_limit = 10M
Ответить