|
Здравствуйте, гость ( Вход | Регистрация )
![]() ![]() |
|
![]()
Сообщение
#1
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
Однажды мне надоело смотреть в spy-лог и выковыривать вкусные новинки.
и получилась такая штука: дошли руки наконец ее причесать и починить. сейчас ходит по примерно 5 крупнейшим .ru хабам. умеет показывать статистику за час, день, неделю. Вопрос: чего еще посчитать? в ближайших планах наладить rss по top10 кто хочет и сумеет - может прикрутить к своему хабу 8) (брать из svn) |
|
|
![]()
Сообщение
#2
|
|
![]() RusHub team lead ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Группа: Модераторы Сообщений: 4 030 Регистрация: 20.6.2008 Из: г. Королёв (Моск. обл.) Пользователь №: 46 Спасибо сказали: 1708 раз ![]() |
Дизайн очень "серый"
|
|
|
![]()
Сообщение
#3
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
про дизайн есть мысли, его сразу после всего функционала и оптимизаций 8)
|
|
|
![]()
Сообщение
#4
|
|
![]() Местная ТехПоддержка ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз ![]() |
да, согласен. Ваш проект скоростью, увы, не блещет. А что используется? Может стоит оптимизировать базу или использовать более быстрый сервер баз данных. Я вот с MySQL переехал на MariaDB. Не жалею. PS а сегодня днем нормально вроде шевелиться)
|
|
|
![]()
Сообщение
#5
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
mariadb - этот тот же мускуль.
а база maria - это тот же myisam возможно он быстрее на пару процентов, врядли больше. тормозит от того что в сутки в табличку приезжает около 3х миллионов запросов. сделать селект статистики прямо в момент отдачи страницы - невозможно (дневная сейчас считается почти час) поэтому сейчас самые долгие подсчеты запускаются из крона и результат кладется в соседние быстрые таблички. но некоторые запросы выполняются быстро (напрмиер сейчас ищут-качают), за исключением попадения на время подсчета долгой статистики - они лочатся и ждут выполнения долгого запроса. точно помогло бы innodb или поцгрес, но пока некогда. |
|
|
![]()
Сообщение
#6
|
|
![]() Местная ТехПоддержка ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз ![]() |
ну ты бы попробовал. У нас на стате прирост составил от 30 до 50 процентов. Правда мы переползли с Innodb на Xtradb
Цитата innodb И еще по теме ссылка - PS надо ж гуглить не maria vs myisam, а aria vs myisam |
|
|
![]()
Сообщение
#7
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
Тут сильно поможет первичный подсчет каждый час, а за сутки-неделю- суммами часовых.
и низкочастотные хвосты выкидывать. но сначала надо придумать до конца что считать нужно, а что нет. сначала надо алгоритмы ускорить раз в 100-1000, а потом уже мелочи путем подбора правильного хранилища 8) |
|
|
![]()
Сообщение
#8
|
|
![]() Местная ТехПоддержка ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз ![]() |
Цитата сначала надо алгоритмы ускорить раз в 100-1000 Как бэ попахивает сказками ;) Совмещать оптимизацию одновременно на уровне сервера и на уровне рефакторинга кода - никто не запрещал же вроде ;) |
|
|
![]()
Сообщение
#9
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
отконвертировать и проверить 1Тb+ баз на этом сервере чуть сложнее и дольше чем соптимизировать алгоритмы для данной задачи.
|
|
|
![]()
Сообщение
#10
|
|
![]() Местная ТехПоддержка ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз ![]() |
Цитата 1Тb+ баз на этом сервере что? Оно у вас не чистится? Просто у вас там 7 дней выборка, я так понимаю оно чистится раз в 7 дней? |
|
|
![]()
Сообщение
#11
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
да нет, просто на этом сервере живет много других больших штук.
|
|
|
![]()
Сообщение
#12
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
прикрутил rss к каждой табличке.
например - - самые скачиваемые файлы. |
|
|
![]()
Сообщение
#13
|
|
![]() Продвинутый участник ![]() ![]() ![]() ![]() Группа: Пользователи Сообщений: 155 Регистрация: 11.1.2009 Пользователь №: 1 772 Спасибо сказали: 29 раз ![]() |
прикрутил rss к каждой табличке. например - - самые скачиваемые файлы. имя файла "самое популярное", или первое попавшееся под таким tth? |
|
|
![]()
Сообщение
#14
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
в теории - самое популярное, в практике - там баг (и не один), поправлю.
и вот допилил: кажется самое полезное 8) |
|
|
![]()
Сообщение
#15
|
|
![]() Участник ![]() ![]() Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз ![]() |
|
|
|
![]() ![]() |
Похожие темы
![]() |
Сейчас: 17.2.2025, 8:27 |