|
Здравствуйте, гость ( Вход | Регистрация )
  |
|
 10.12.2010, 0:38
Сообщение
#1
|
|
 Участник  Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз  |
Однажды мне надоело смотреть в spy-лог и выковыривать вкусные новинки.
и получилась такая штука: дошли руки наконец ее причесать и починить. сейчас ходит по примерно 5 крупнейшим .ru хабам. умеет показывать статистику за час, день, неделю. Вопрос: чего еще посчитать? в ближайших планах наладить rss по top10 кто хочет и сумеет - может прикрутить к своему хабу 8) (брать из svn) |
 |
 
|
|
10.12.2010, 9:47
Сообщение
#2
|
|
 RusHub team lead Группа: Модераторы Сообщений: 4 030 Регистрация: 20.6.2008 Из: г. Королёв (Моск. обл.) Пользователь №: 46 Спасибо сказали: 1708 раз |
Дизайн очень "серый"
|
|
|
|
|
10.12.2010, 13:38
Сообщение
#3
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
про дизайн есть мысли, его сразу после всего функционала и оптимизаций 8)
|
|
|
|
|
10.12.2010, 14:41
Сообщение
#4
|
|
 Местная ТехПоддержка Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз |
да, согласен. Ваш проект скоростью, увы, не блещет. А что используется? Может стоит оптимизировать базу или использовать более быстрый сервер баз данных. Я вот с MySQL переехал на MariaDB. Не жалею. PS а сегодня днем нормально вроде шевелиться)
|
|
|
|
|
10.12.2010, 15:57
Сообщение
#5
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
mariadb - этот тот же мускуль.
а база maria - это тот же myisam возможно он быстрее на пару процентов, врядли больше. тормозит от того что в сутки в табличку приезжает около 3х миллионов запросов. сделать селект статистики прямо в момент отдачи страницы - невозможно (дневная сейчас считается почти час) поэтому сейчас самые долгие подсчеты запускаются из крона и результат кладется в соседние быстрые таблички. но некоторые запросы выполняются быстро (напрмиер сейчас ищут-качают), за исключением попадения на время подсчета долгой статистики - они лочатся и ждут выполнения долгого запроса. точно помогло бы innodb или поцгрес, но пока некогда. |
|
|
|
|
10.12.2010, 16:36
Сообщение
#6
|
|
|
Местная ТехПоддержка Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз |
ну ты бы попробовал. У нас на стате прирост составил от 30 до 50 процентов. Правда мы переползли с Innodb на Xtradb
Цитата innodb - ololo? И еще по теме ссылка - PS надо ж гуглить не maria vs myisam, а aria vs myisam |
|
|
|
|
10.12.2010, 17:22
Сообщение
#7
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
Тут сильно поможет первичный подсчет каждый час, а за сутки-неделю- суммами часовых.
и низкочастотные хвосты выкидывать. но сначала надо придумать до конца что считать нужно, а что нет. сначала надо алгоритмы ускорить раз в 100-1000, а потом уже мелочи путем подбора правильного хранилища 8) |
|
|
|
|
10.12.2010, 17:26
Сообщение
#8
|
|
|
Местная ТехПоддержка Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз |
Цитата сначала надо алгоритмы ускорить раз в 100-1000 Как бэ попахивает сказками ;) Совмещать оптимизацию одновременно на уровне сервера и на уровне рефакторинга кода - никто не запрещал же вроде ;) |
|
|
|
|
10.12.2010, 20:25
Сообщение
#9
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
отконвертировать и проверить 1Тb+ баз на этом сервере чуть сложнее и дольше чем соптимизировать алгоритмы для данной задачи.
|
|
|
|
|
10.12.2010, 21:25
Сообщение
#10
|
|
|
Местная ТехПоддержка Группа: Администраторы Сообщений: 1 875 Регистрация: 18.7.2008 Из: Моск. Обл, г. королев, район Болшево Пользователь №: 221 Спасибо сказали: 220 раз |
Цитата 1Тb+ баз на этом сервере что? Оно у вас не чистится? Просто у вас там 7 дней выборка, я так понимаю оно чистится раз в 7 дней? |
|
|
|
|
13.12.2010, 15:46
Сообщение
#11
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
да нет, просто на этом сервере живет много других больших штук.
|
|
|
|
|
24.5.2011, 15:37
Сообщение
#12
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
прикрутил rss к каждой табличке.
например - - самые скачиваемые файлы. |
|
|
|
|
24.5.2011, 18:09
Сообщение
#13
|
|
 Продвинутый участник Группа: Пользователи Сообщений: 155 Регистрация: 11.1.2009 Пользователь №: 1 772 Спасибо сказали: 29 раз |
Цитата(pro @ 24.5.2011, 15:37)  прикрутил rss к каждой табличке. например - - самые скачиваемые файлы. имя файла "самое популярное", или первое попавшееся под таким tth? |
|
|
|
|
25.5.2011, 0:20
Сообщение
#14
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
в теории - самое популярное, в практике - там баг (и не один), поправлю.
и вот допилил: кажется самое полезное 8) |
|
|
|
|
26.5.2011, 0:14
Сообщение
#15
|
|
|
Участник Группа: Пользователи Сообщений: 41 Регистрация: 8.1.2009 Пользователь №: 1 729 Спасибо сказали: 18 раз |
виджет на яндыкс:
|
|
|
|
|
Похожие темы
|
Сейчас: 23.12.2024, 4:21 |
