[WT] [Архив] [Поиск] [Главная] [Управление]

[Назад]
Ответ в нить
Animapcha image @ [?]
Тема   (reply to 44020)
Сообщение flower
Файл 
Пароль  (для удаления файлов и сообщений)
Параметры   
  • Прежде чем постить, ознакомьтесь с правилами.
  • Поддерживаемые типы файлов: GIF, JPG, PDF, PNG
  • Максимально допустимый размер файлов: 4895 кБ.
  • Изображения, размер которых превышает 200 на 200 пикселей, будут уменьшены.
  • Ныне 982 unique user posts. Посмотреть каталог
  • Радио:

Файл: 13221302863.png-(214.09KB, 466x532, say.png)
44020 No. 44020 watch    
Прочтите, нипа: личное обращение основателя http://www.so-slow.com/

Дело в том, что есть одна пузомерка. По глупости и простоте душевной я захостил ее в логове гугла, GAE. На тот момент они давали бесплатный хостинг с резиновыми лимитами. Теперь они перешли на новые квоты, и пузомерка резко вылезла за их пределы. Сначала я думал, что достаточно будет просто перенести данные на другой хост и освободить место на GAE, вернув все в бесплатные рамки. Я слил данные, сконвертил их и залил на http://backup.ep.io/, откуда они отдаются по jsonp. Я уже обрадовался, но беда в том, что я не могу удалить эти данные из GAE, чтобы вернуться в рамки бесплатных квот.
Ситуация следующая - мне не хватает даже моей платной квоты на удаление данных. Скрипт для удаления отжирает слишком много ресурсов. Всего на GAE около 900к записей, и в день я могу удалять не более 40к.
Короче, сейчас я плачу в день около 3$, что недопустимо. Поэтому ищу среди вас советчиков, помощников и меценатов. Если в ближайшие дни решение не будет найдено, придется остановить работу пузомерки, то есть, данные перестанут собираться. А это автоматически делает бессмысленным ее воскрешение.
inb4 всем похуй
Развернуть все изображения
>> No. 44021    
>>44020
DROP TABLE отжирает слишком много ресурсов?
>> No. 44022    
>>44021
Во-первых, все данные грохать нельзя, они очень-очень-очень долго бекапятся, поэтому появятся белые пятна.
В-вторых, там бигтейбл, а не какой-то мускул, http://code.google.com/appengine/docs/python/datastore/queries.html
>> No. 44032    
Файл: 132214620913.jpg-(441.85KB, 524x811, d4d964173b26a12e2bf7ab4609e0c88a.jpg)
44032
Профессор, вам следует использовать костылик. Сливать данные куда-ниубдь в реал-тайме (например на вашу же машинку) и удалять лишнее с гуглоапа. Это будет означать месяц аптаймчика, но за этот месяц можно будет написать обходной путь, который позволит использовать сервис без проблемок. Могу помочь машинными ресурсами (правда, нет гарантийки, что они не исчезнут навсегда в любой момент времени). Денежками помочь не могу, поскольку сам феерическое нищебыдло :(
>> No. 44034    
Облакопроблемы такие облакопроблемы. Enjoy your анальное рабство гугла.
>> No. 44037    
Полистай, что ли, http://www.lowendbox.com/ - за $5 в месяц можно арендовать нормальный VPS и забыть об анальных проблемах.
>> No. 44043    
Файл: 132216369339.jpg-(18.78KB, 536x390, 123233445454.jpg)
44043
>>44032
Не получается. Либо долго, либо дорого, либо и то и другое.
>>44034
Okay.jpg
>>44037
Спасибо, интересный список. Но я что-то не верю в впс с полгигом памяти за 6 долларов. У тебя есть опыт работы с кем-то из этих хостеров?
>> No. 44044    
Насколько важны те данные, как данные? Есть ли смысл их хранить? Может, оставить их уже в виде отчетов?
>> No. 44045    
>>44044 Ну то есть, в таком контексте есть смысл начать сбор заново.
>> No. 44046    
>>44044
Изначально эта пузомерка задумывалась для того, чтобы полученные данные можно было легко обработать. Они никак не зависят от морды, это просто скорость в определенный момент времени. В этом смысле, они ценнее, чем сам сайт. Если кто помнит, раньше я сделал вот это http://so-slow.appspot.com Там данные превращаются в кашу :3.
>> No. 44048    
>>44046 Ну 900К записей, это же исторические данные? Накой черт они нужны, если ни хранить их, ни слить их нет вменяемой возможности?
>> No. 44049    
>>44043
Нашёл там одну впску за 4 бакса для своей лабуды, все характеристики соответствуют заявленным. Дисковая подсистема даже шустрее, чем на моём домашнем компе, это хороший признак. Вообще, там по комментам обычно ясно, что оно из себя представляет. Из минусов - за такую цену 100% аптайм никто не гарантирует, за полгода было одно запланированое отключение примерно на час, предупредили заранее. Других проблем не было пока.
>> No. 44050    
>>44020
Грохни все, начни заново.
Особой ценности эти данные не представляют.
>> No. 44051    
>>44048
Не, я их слил же. Вот они, можете дергать по урлу вроде этого http://backup.ep.io/board_data/iichan.ru/b/2010-11-10/2/
Просто удалить их с гуглохостинга проблематично. А если не удалить, то и новые я получать не смогу.
>>44049
Окай, попробую что-нибудь поискать.
>> No. 44053    
в чем вообще проблема? пусть соус либо даст денег, либо пустит на сервер
>> No. 44054    
>>44053
Вы так говорите, будто Соус не Соус, а Сант-Клаус какой-то.
>> No. 44056    
Забей на всё и забухай же
>> No. 44057    
Файл: 13221907724.jpg-(380.77KB, 700x980, 85886884f045e8b494aa01097a95d086.jpg)
44057
>Не получается. Либо долго, либо дорого, либо и то и другое.
>Не, я их слил же.

Наркоманите штоле?

1. поднимаете редиректы на свой собственный комп (на котором заведена база данных)
2. сливаете входящие данные к себе (если в базе за несколько лет всего 0.9М записей ее выдержит даже смартфончик)
3. Чистите все добро с гуглачика.
4. Пишете скрипт, который будет периодически вычищать "лишнее" куда-нибудь в архивы (да хотя бы к вам на почту)
5. Закачиваете дельточку с базочки (которая необходима для работки программочки) в гуголчик.
6. Переводите рельсочки входящих данных обратно в старое хранилище.
7. ????
8. Миленько!
>> No. 44060    
>>44057
Бесполезные советы такие бесполезные.
>> No. 44062    
>>44060
Чем же это они бесполезные?
>> No. 44063    
>>44062
Практически всем. Почти в каждом пункте технические несостыковки.
>> No. 44064    
>>44063
Ты даже генду на фапче насмешил, школьник. Где ты там несостыковки увидел?
>> No. 44065    
>>44064
О Б-же.
>> No. 44066    
>>44064
Подозреваю, что любой или какой-то конкретный из шагов в случае анального GAE либо будет происходить слишком долго (дабы оставаться в квотах), толком не успевая за рутинной работой, либо выльется в дикое увеличение нагрузки и соответственно стоимости, которое (даже локальное) не по карману нашему нищеброду.
>> No. 44067    
>>44066
Да нет, там сугубо техническая бессмыслица. Человек явно не в курсе, что такое GAE и с чем его едят.
>> No. 44068    
Файл: 132221516172.jpg-(517.88KB, 1280x720, e41db46714785f1b1123831b6e5f0e8c.jpg)
44068
>>44067
Няша, ты сейчас пытаешься мне втолковать, что в Объектно Ариентированной WEB-хуете нельзя сменить БАКЭНД для базы данных. Но можно поменять механически СЕРВЕР на котором она будет выполняться и все будет шоколадно.
>> No. 44069    
Я же правильно понял смысл твоих постов? Нэ??
_>>44068_
>> No. 44071    
>>44069
Я ничего не хочу тебе втолковать. Спасибо за советы, я оценил.
[Назад]


Удалить сообщение []
Пароль  
[Mod]