VirtualIreland.ru - Виртуальная Ирландия
Вернуться   VirtualIreland.ru - Виртуальная Ирландия > Живем в Ирландии > IT и Связь

IT и Связь Обсуждение "айтишных" вопросов и средств связи

Ответ
 
Опции темы Опции просмотра
Старый 04.05.2010, 22:51   #196
Спам-робот
 
Аватар для svu
 
Откуда: Ленинград --> Петербург --> Dublin --> Cork --> Castleisland --> Tralee
Сообщений: 20,480
Благодарности: 12,385 в 6,695 сообщениях Поиск благодарностей svu
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от vc Посмотреть сообщение
По одному ряду 2 миллиарда? А БД лочить будете?
В зависимости от.

Цитата:
Сообщение от ixania Посмотреть сообщение
знаем мы когда это "когда" наступает, когда уже некогда
А это вопрос планирования.
svu вне форума   Ответить с цитированием

Зарегистрируйтесь или войдите под своим именем, чтобы спрятать этот рекламный блок
Старый 04.05.2010, 23:18   #197
Заслуженный Участник
 
Аватар для ixania
 
Сообщений: 2,951
Благодарности: 1,004 в 534 сообщениях Поиск благодарностей ixania
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от svu Посмотреть сообщение
А это вопрос планирования.
Какого планирования? фанеры над парижем? кто планирует? основываясь на чем? на ваших же предложениях обрабатывать по одному ряду?
Те кто планируют, делают это на основании тогоже фидбэка от вас.
__________________
Complaining Is Stupid. Either Act or Forget.
ixania вне форума   Ответить с цитированием
Старый 04.05.2010, 23:27   #198
Спам-робот
 
Аватар для svu
 
Откуда: Ленинград --> Петербург --> Dublin --> Cork --> Castleisland --> Tralee
Сообщений: 20,480
Благодарности: 12,385 в 6,695 сообщениях Поиск благодарностей svu
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от ixania Посмотреть сообщение
Какого планирования?
Планирования проекта. Если в проекте значатся серьезные требования по масштабированию, объемам данных - требуется отвести ресурсы (время, разработчиков) на оптимизацию. Это недостаточно очевидно?
svu вне форума   Ответить с цитированием
Старый 05.05.2010, 08:43   #199
Спам-робот
 
Аватар для YellowMan
 
Откуда: Dublin<->Брянск
Сообщений: 21,268
Благодарности: 11,080 в 5,139 сообщениях Поиск благодарностей YellowMan
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от svu Посмотреть сообщение
Если в проекте значатся серьезные требования по масштабированию, объемам данных - требуется отвести ресурсы (время, разработчиков) на оптимизацию.
2 млн. - это не серьезные требования по объемам данных, это детский сад какой-то.
Вот 2 млн. за полчаса + пару тыщ усеров - это уже может быть интересно.

Но модные архитектуры с гламурными словечками не доживут,помрут гораздо раньше.


Цитата:
Сообщение от tadpole Посмотреть сообщение
В результате 20-30 тысяч экземпляров бизнес транзакций заливаются в течении шести часов. 4-5 тысяч - в течении получаса.
Гнать поганой метлой
__________________
My Church is Black...

Последний раз редактировалось YellowMan, 05.05.2010 в 08:45. Причина: Добавлено сообщение
YellowMan вне форума   Ответить с цитированием
Старый 05.05.2010, 08:52   #200
Спам-робот
 
Аватар для svu
 
Откуда: Ленинград --> Петербург --> Dublin --> Cork --> Castleisland --> Tralee
Сообщений: 20,480
Благодарности: 12,385 в 6,695 сообщениях Поиск благодарностей svu
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от YellowMan Посмотреть сообщение
2 млн. - это не серьезные требования по объемам данных, это детский сад какой-то.
Вот 2 млн. за полчаса + пару тыщ усеров - это уже может быть интересно.
"в каждой губернии свои масштабы" (с)
svu вне форума   Ответить с цитированием
Старый 05.05.2010, 09:00   #201
READ ONLY
 
Аватар для AlexL
 
Сообщений: 3,156
Благодарности: 1,856 в 929 сообщениях Поиск благодарностей AlexL
Отправить сообщение для  AlexL с помощью ICQ
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от svu Посмотреть сообщение
"в каждой губернии свои масштабы" (с)
правильная и красивая архитектура должна быть масштабируема
иначе получается игра в песочнице.
__________________
Хотели всё и сразу, а получили ничего и надолго.
[url=http://www.visited.ru][img]http://www.visited.ru/flagmap.php?visited=ATBEBGCZFRDEIEITMTNLRUESUKVATR[/img][/url]
AlexL вне форума   Ответить с цитированием
Старый 05.05.2010, 09:04   #202
Спам-робот
 
Аватар для svu
 
Откуда: Ленинград --> Петербург --> Dublin --> Cork --> Castleisland --> Tralee
Сообщений: 20,480
Благодарности: 12,385 в 6,695 сообщениях Поиск благодарностей svu
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от AlexL Посмотреть сообщение
правильная и красивая архитектура должна быть масштабируема
Согласен. Но и у масштабируемости могут быть разные пределы. Вы часто создаете архитектуры, масштабируемые до размеров гугла? Я - ни разу (и вряд ли осилил бы).
svu вне форума   Ответить с цитированием
Старый 05.05.2010, 09:12   #203
READ ONLY
 
Аватар для AlexL
 
Сообщений: 3,156
Благодарности: 1,856 в 929 сообщениях Поиск благодарностей AlexL
Отправить сообщение для  AlexL с помощью ICQ
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от svu Посмотреть сообщение
Согласен. Но и у масштабируемости могут быть разные пределы. Вы часто создаете архитектуры, масштабируемые до размеров гугла? Я - ни разу (и вряд ли осилил бы).
зачем же крайности.. 2 млн записей это не размер гугла это средний проект.. может конечно это от отрасли зависит, но у меня проекты были в самых разных областях - банковской, нефтяной, страховой, авиационной, здравохранения, транспортной.
__________________
Хотели всё и сразу, а получили ничего и надолго.
[url=http://www.visited.ru][img]http://www.visited.ru/flagmap.php?visited=ATBEBGCZFRDEIEITMTNLRUESUKVATR[/img][/url]
AlexL вне форума   Ответить с цитированием
Старый 05.05.2010, 09:15   #204
Спам-робот
 
Аватар для YellowMan
 
Откуда: Dublin<->Брянск
Сообщений: 21,268
Благодарности: 11,080 в 5,139 сообщениях Поиск благодарностей YellowMan
По умолчанию Re: SQL вопросик

Не ну надо сразу определиться - или для нас табличка в 2М и с десяток усеров - это слишком много и надо придумывать оправдания или это только начало увлекательного пути без конца.

Потому-что пока все что я видел сам и слышал от людей умнее меня - все эти модные словечки ломаются и начинают выделять смазку там где база даже не замечает что ее кто-то пытается пригрузить.
__________________
My Church is Black...
YellowMan вне форума   Ответить с цитированием
Старый 05.05.2010, 09:16   #205
Спам-робот
 
Аватар для svu
 
Откуда: Ленинград --> Петербург --> Dublin --> Cork --> Castleisland --> Tralee
Сообщений: 20,480
Благодарности: 12,385 в 6,695 сообщениях Поиск благодарностей svu
По умолчанию Re: SQL вопросик

Сами по себе 2 млн - это ни о чем не говорит. Вопрос в том, за сколько времени необходимо их обработать. Если за секунду, причем гарантировано - это одно. Если можно часок поковыряться - это совсем другое. Опять же, всякие детали - типа того, можно ли на это время занять машину только этой работой, каков размер записи и сложность алгоритмов ...

svu добавил 05.05.2010 в 10:23
Цитата:
Сообщение от YellowMan Посмотреть сообщение
все эти модные словечки ломаются и начинают выделять смазку там где база даже не замечает что ее кто-то пытается пригрузить.
См. выше насчет красоты и скорости.

Последний раз редактировалось svu, 05.05.2010 в 09:23. Причина: Добавлено сообщение
svu вне форума   Ответить с цитированием
Старый 05.05.2010, 09:27   #206
READ ONLY
 
Аватар для AlexL
 
Сообщений: 3,156
Благодарности: 1,856 в 929 сообщениях Поиск благодарностей AlexL
Отправить сообщение для  AlexL с помощью ICQ
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от svu Посмотреть сообщение
Сами по себе 2 млн - это ни о чем не говорит. Вопрос в том, за сколько времени необходимо их обработать. Если за секунду, причем гарантировано - это одно. Если можно часок поковыряться - это совсем другое. Опять же, всякие детали - типа того, можно ли на это время занять машину только этой работой, каков размер записи и сложность алгоритмов ...
на таких объемах час ковыряния это прошлый век, с поправкой насчет неправильноcти архитектуры прошлого, отсталых языков программирования и дохленьких компов.

AlexL добавил 05.05.2010 в 10:31
Цитата:
Сообщение от svu Посмотреть сообщение
См. выше насчет красоты и скорости.
красивый код должен быть быстр, иначе в течение длительного ожидания его выполнения теряется его очарование..

ЗЫ. моя первая программка была написана на clipper'87 года, обработка 100 000 записей занимала в среднем 5-8 минут на компе XT.
__________________
Хотели всё и сразу, а получили ничего и надолго.
[url=http://www.visited.ru][img]http://www.visited.ru/flagmap.php?visited=ATBEBGCZFRDEIEITMTNLRUESUKVATR[/img][/url]

Последний раз редактировалось AlexL, 05.05.2010 в 09:38. Причина: Добавлено сообщение
AlexL вне форума   Ответить с цитированием
Старый 05.05.2010, 09:36   #207
Спам-робот
 
Аватар для svu
 
Откуда: Ленинград --> Петербург --> Dublin --> Cork --> Castleisland --> Tralee
Сообщений: 20,480
Благодарности: 12,385 в 6,695 сообщениях Поиск благодарностей svu
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от AlexL Посмотреть сообщение
красивый код должен быть быстр, иначе в течение длительного ожидания его выполнения теряется его очарование..
Ровно наоборот. Красивый код может (должен?) быть медленным - это дает человеку время помедитировать над его красотой!

svu добавил 05.05.2010 в 10:37
Цитата:
Сообщение от AlexL Посмотреть сообщение
час ковыряния это прошлый век
Я Вам в эти записи блобов понапихаю! В каждом блобе по зипу, в каждом зипе по куче хмлей и жпегов!

svu добавил 05.05.2010 в 10:42
Цитата:
Сообщение от AlexL Посмотреть сообщение
ЗЫ. моя первая программка была написана на clipper'87 года, обработка 100 000 записей занимала в среднем 5-8 минут на компе XT.
ЗЫ Моя первая программка была написана на фортране и занималась научными вычислениями, а не какими-то там базами данных

Последний раз редактировалось svu, 05.05.2010 в 09:42. Причина: Добавлено сообщение
svu вне форума   Ответить с цитированием
Старый 05.05.2010, 09:52   #208
READ ONLY
 
Аватар для AlexL
 
Сообщений: 3,156
Благодарности: 1,856 в 929 сообщениях Поиск благодарностей AlexL
Отправить сообщение для  AlexL с помощью ICQ
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от svu Посмотреть сообщение
Ровно наоборот. Красивый код может (должен?) быть медленным - это дает человеку время помедитировать над его красотой!
если писать программки для себя и для медитации, то согласен.


Цитата:
Сообщение от svu Посмотреть сообщение
Я Вам в эти записи блобов понапихаю! В каждом блобе по зипу, в каждом зипе по куче хмлей и жпегов!
это из вредности что ли ? так приложение потом же этим и поперхнется..


Цитата:
Сообщение от svu Посмотреть сообщение
ЗЫ Моя первая программка была написана на фортране и занималась научными вычислениями, а не какими-то там базами данных
мы же об обработке данных здесь пишем.. фортран вообще-то входил в обязательную программу обучения, мы диффуры на нем считали.
я не считаю это большим достижением.
__________________
Хотели всё и сразу, а получили ничего и надолго.
[url=http://www.visited.ru][img]http://www.visited.ru/flagmap.php?visited=ATBEBGCZFRDEIEITMTNLRUESUKVATR[/img][/url]
AlexL вне форума   Ответить с цитированием

Зарегистрируйтесь или войдите под своим именем, чтобы спрятать этот рекламный блок
Старый 05.05.2010, 10:13   #209
Practical UNIX Terrorist
 
Аватар для rojer
 
Откуда: bray.ie<-dub.ie<-msk.ru<-ykt.ru
Сообщений: 2,291
Благодарности: 1,257 в 647 сообщениях Поиск благодарностей rojer
По умолчанию Re: SQL вопросик

господа, в пылу спора вы потеряли 3 порядка:

vc> Давайте спросим у ораклистов про размеры их таблиц? Как вы будете обрабатывать таблицу с 2-3 млрд рядов?
YellowMan> 2 млн. - это не серьезные требования по объемам данных, это детский сад какой-то.

2-3 миллиарда - это интересно, 2-3 миллиона - ерунда.
__________________
Even if a billion people believe something it can still be ridiculous.
rojer вне форума   Ответить с цитированием
Старый 05.05.2010, 10:15   #210
Спам-робот
 
Аватар для svu
 
Откуда: Ленинград --> Петербург --> Dublin --> Cork --> Castleisland --> Tralee
Сообщений: 20,480
Благодарности: 12,385 в 6,695 сообщениях Поиск благодарностей svu
По умолчанию Re: SQL вопросик

Цитата:
Сообщение от AlexL Посмотреть сообщение
это из вредности что ли ? так приложение потом же этим и поперхнется..
Это я к тому, что нельзя говорить о правильной скорости обработки 2М записей, не уточняя хотя бы примерно их структуру и характер обработки.

Цитата:
Сообщение от AlexL Посмотреть сообщение
фортран вообще-то входил в обязательную программу обучения
У нас на этом месте был паскаль на ямахах. А фортраном я развлекался в ФТИ им. Иоффе, сидя рядом с большим бубликом Токамаком и считая данные из него.

svu добавил 05.05.2010 в 11:16
Цитата:
Сообщение от rojer Посмотреть сообщение
2-3 миллиарда - это интересно, 2-3 миллиона - ерунда.
Какая разница, если красивое все равно будет тормозить, а быстрое будет уродливо?

Последний раз редактировалось svu, 05.05.2010 в 10:16. Причина: Добавлено сообщение
svu вне форума   Ответить с цитированием
Ответ



Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать на сообщения
Вы не можете добавлять вложения
Вы не можете редактировать свои сообщения

BB код Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход

Похожие темы
Тема Автор Раздел Ответов Последнее сообщ.
Вопросик Asiza Вопросы и предложения 13 13.02.2010 21:44
Вопросик! ProGameR Автотранспорт 14 31.01.2010 20:59
вопросик Ратобор Вопросы и предложения 5 25.01.2010 16:03
вопросик. xandrey Иммиграция 9 15.12.2009 21:31
Вопросик Irinak Работа в Ирландии 12 20.01.2006 11:20


Часовой пояс GMT, времени сейчас: 14:08.


vBulletin®, Copyright ©2000-2025, Jelsoft Enterprises Ltd., Русификация: zCarot, Vovan & Co
©2003-2025 VirtualIreland.ru - Виртуальная Ирландия