The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."
Вариант для распечатки  
Пред. тема | След. тема 
Форумы Разговоры, обсуждение новостей (Public)
Изначальное сообщение [ Отслеживать ]

"Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от opennews (??) on 24-Ноя-08, 10:28 
Представители Google объявили (http://googleblog.blogspot.com/2008/11/sorting-1pb-with-mapr...), что добились снижения времени сортировки 1 Терабайта данных (текстовые файлы с 10 миллиардами записей по 100 байт) на 1000 компьютерах до 68 секунд. Прошлый рекорд скорости сортировки 1 Тб данных составлял 209 секунд на 910 компьютерах.


Сортировка 1 Петабайта данных была выполнена за 6 часов 2 минуты. Для выполнения операции было задействовано 4 тысячи компьютеров, операции были распараллелены при помощи программной модели MapReduce (http://labs.google.com/papers/mapreduce.html).


В июне в новостях проходила информация (https://www.opennet.ru/opennews/art.shtml?num=16228) о построении энтузиастами самодельного кластера на базе четырех видеокарт NVIDIA GeForce 9800 GX2 (в сумме 8 GPU), по производительности равный кластеру из 300 ПК с Intel Core 2 Duo 2.4GHz. На днях компания NVIDIA официально представила (http://www.nvidia.com/object/personal_supercomputing.html) похожий прод...

URL: http://googleblog.blogspot.com/2008/11/sorting-1pb-with-mapr...
Новость: https://www.opennet.ru/opennews/art.shtml?num=19054

Высказать мнение | Ответить | Правка | Cообщить модератору

 Оглавление

Сообщения по теме [Сортировка по времени | RSS]


2. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил"  
Сообщение от Zlobec email on 24-Ноя-08, 10:29 
А если из них кластер собрать?
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

3. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил"  
Сообщение от Furcube (ok) on 24-Ноя-08, 11:49 
можно будет снабжать горячей водой прилегающие кварталы
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

4. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил"  
Сообщение от SlOPS (??) on 24-Ноя-08, 13:30 
Наоборот, окружающие кварталы останутся без горячей воды. Это даже меньше чем накопительный водонагреватель.
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

6. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил"  
Сообщение от PereresusNeVlezaetBuggy email(ok) on 24-Ноя-08, 14:06 
Значит, кварталы останутся без холодной воды. ;)
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

5. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от User294 (ok) on 24-Ноя-08, 13:36 
Терафлопс, терафлопс... а оказывается что терафлопс - только для никому особо не нужной (кроме игрушечников разве что) кастрированной плавучки.А нормальная, двойной точности - "80 GigaFLOPS - двойной точности (64 бита)".Итого - за жонглерство цифрами маркетологам зачет.А реалии как всегда не столь красивы как обещали...

ЗЫ и вообще, "коммерческий терафлопс" легко даст фору "коммерческому гигабайту".По степени надувалова ессно ;)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

13. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от PereresusNeVlezaetBuggy email(ok) on 24-Ноя-08, 17:39 
>Терафлопс, терафлопс... а оказывается что терафлопс - только для никому особо не
>нужной (кроме игрушечников разве что) кастрированной плавучки.А нормальная, двойной точности -
>"80 GigaFLOPS - двойной точности (64 бита)".Итого - за жонглерство цифрами
>маркетологам зачет.А реалии как всегда не столь красивы как обещали...
>
>ЗЫ и вообще, "коммерческий терафлопс" легко даст фору "коммерческому гигабайту".По степени надувалова
>ессно ;)

Положим, насчёт гигабайтов-то на самом деле надувают все остальные, окромя производителей винтов и иже с ними. То, что люди обычно зовут гигабайтами, вообще-то суть гибибайты. ;)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

17. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от User294 (??) on 24-Ноя-08, 19:41 
А термин гибибайт насколько я понимаю придумали позже чем гигабайт.И ввели его в обращение даже не потому что так правильнее а как раз из-за того что коммерсанты стали наглеть, завышая емкость дисков.
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

18. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от PereresusNeVlezaetBuggy email(ok) on 24-Ноя-08, 19:47 
>А термин гибибайт насколько я понимаю придумали позже чем гигабайт.И ввели его
>в обращение даже не потому что так правильнее а как раз
>из-за того что коммерсанты стали наглеть, завышая емкость дисков.

"Гибибайт" был стандартизирован примерно одновременно с началом "завышения", и ещё неизвестно, что после чего началось. :) А вот значение термина "гигабайт" не менялось.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

20. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от User294 (??) on 24-Ноя-08, 23:33 
>"Гибибайт" был стандартизирован примерно одновременно с началом "завышения",

Сам феномен завышения основан на том что все под термином "гигабайт" понимали тот гигабайт который происходит из степеней двойки, а вовсе не тот который в десятичной системе а тут вдруг производители прикинули - так цифирь больше получается совершенно задаром и без затрат.Помнится данный прикидон с элементами прокидона в результате дорого обошелся сигейту.Который в конце концов за это таки засудили... ;)

>и ещё неизвестно, что после чего началось. :)

Вам - может и неизвестно.А я с древних времен привык что "в килобайте 1024 байта.В мегабайте 1024 килобайта.В гигабайте 1024 мегабайта".И не ...ет!Если кому-то охота называть их киби-что-то-там чтобы дифференцировать правильные гигабайты от коммерческих гигабайтов формально имеющих право на существование в десятичной системе счисления - я тут не при чем.И я не виноват что откуда-то пошла такая ITшная фича - "не совсем правильно" называть гигабайтами то что происходит от степени двойки а не десятки.

>А вот значение термина "гигабайт" не менялось.

Ага, а хотите подлый вопрос?Флоппик.Дискетка то бишь, которая 3.5"На 1.44Mb.Ну-ка скажите, а 1.44 чего там в этих ваших терминах? =)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

21. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от PereresusNeVlezaetBuggy email(ok) on 25-Ноя-08, 00:24 
>[оверквотинг удален]
>
>>и ещё неизвестно, что после чего началось. :)
>
>Вам - может и неизвестно.А я с древних времен привык что "в
>килобайте 1024 байта.В мегабайте 1024 килобайта.В гигабайте 1024 мегабайта".И не ...ет!Если
>кому-то охота называть их киби-что-то-там чтобы дифференцировать правильные гигабайты от коммерческих
>гигабайтов формально имеющих право на существование в десятичной системе счисления -
>я тут не при чем.И я не виноват что откуда-то пошла
>такая ITшная фича - "не совсем правильно" называть гигабайтами то что
>происходит от степени двойки а не десятки.

Боюсь вас огорчить, я в курсе всех этих вещей и событий. ;) А "неизвестно, что после чего началось" относилось к вашему утверждению, что термин "гибибайт" был введён после того, как производители дисков (не спорю, явно из соображений экономии, а не правильности наименования) начали по-новому считать объём дисков.

Речь-то о том, что ИТ-шники сами себя надули. Разве кого-то заставляли использовать некорретные (это было известно изначально) названия?

>>А вот значение термина "гигабайт" не менялось.
>
>Ага, а хотите подлый вопрос?Флоппик.Дискетка то бишь, которая 3.5"На 1.44Mb.Ну-ка скажите, а
>1.44 чего там в этих ваших терминах? =)

1,44 кебикилобайт. ;) Вы за примерами в Википедию ходили, я угадал? ;)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

24. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от User294 (ok) on 26-Ноя-08, 04:53 
>явно из соображений экономии, а не правильности наименования) начали по-новому считать
>объём дисков.

Просто до этих пор всех устраивал "двоичный" мегабайт.Пусть он и "неправильно" называется но это все воспринимали как данность и никому и в бошку не приходило что-то там про какие-то киби и гиби выдавать.Достаточно почитать литературу тех времен и не греть нам мозг.

>Речь-то о том, что ИТ-шники сами себя надули. Разве кого-то заставляли использовать
>некорретные (это было известно изначально) названия?

Мало ли что там некорректное.Из-за IT появилось дохрена разных терминов.Винчестер - винтовка такая, а вовсе не жесткий диск.И что, мне теперь винты перестать так называть?Умрете с этой мечтой =)

>1,44 кебикилобайт. ;)

Сами вот ЭТО слово и выговаривайте.Даже если оно правильное я так чирикать учиться не собираюсь ;)

>Вы за примерами в Википедию ходили, я угадал? ;)

Хм... я флопиками пользовался до того как о википедии вообще кто-то впервые услышал.Кстати 5" еще юзал в свое время.А потом игрался с небезызвестной некоторым утилиткой 2M (да, про нее в вики кстати тоже есть, хоть и не полно и не совсем корректно).Прикиньте? =)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

25. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от PereresusNeVlezaetBuggy email(ok) on 26-Ноя-08, 08:36 
>>явно из соображений экономии, а не правильности наименования) начали по-новому считать
>>объём дисков.
>
>Просто до этих пор всех устраивал "двоичный" мегабайт.Пусть он и "неправильно" называется
>но это все воспринимали как данность и никому и в бошку
>не приходило что-то там про какие-то киби и гиби выдавать.Достаточно почитать
>литературу тех времен и не греть нам мозг.

Зачем литературу? Я и так всё прекрасно помню. ;) Суть это не меняет (ниже).

>>Речь-то о том, что ИТ-шники сами себя надули. Разве кого-то заставляли использовать
>>некорретные (это было известно изначально) названия?
>
>Мало ли что там некорректное.Из-за IT появилось дохрена разных терминов.Винчестер - винтовка
>такая, а вовсе не жесткий диск.И что, мне теперь винты перестать
>так называть?Умрете с этой мечтой =)

"Винчестер" - это жаргонизм, его смысл не пересекается с исходным, равно как и "винт". А вот килобайт "ИТ-шный" и килобайт СИ-шный меряют одно и то же. Меняться вас никто не заставляет, но поимейте же мужество признать, что сами виноваты? :) Я вот честно признаю (и продолжаю всё измерять килобайтами, постоянно пытаясь контроллировать, что же я меряю... в общем, любителя найти гемморой себе на попу за километр видно) :))

>>1,44 кебикилобайт. ;)
>
>Сами вот ЭТО слово и выговаривайте.Даже если оно правильное я так чирикать
>учиться не собираюсь ;)

Это была шутка:). А насчёт выговаривать - могу предложить сокращение "кекиб", м? ;)

>>Вы за примерами в Википедию ходили, я угадал? ;)
>
>Хм... я флопиками пользовался до того как о википедии вообще кто-то впервые
>услышал.Кстати 5" еще юзал в свое время.А потом игрался с небезызвестной
>некоторым утилиткой 2M (да, про нее в вики кстати тоже есть,
>хоть и не полно и не совсем корректно).Прикиньте? =)

Ну вот, давайте ещё как на башорге будем меряться, кто со "Спектрумом" баловался, а кто ещё с перфокартами работал... :))) Меня просто память на мысль навела, я полез в Вики и проверил - точно, единственный найденный там пример девиации - дискеты...

(А 2M у меня сработала лишь на одной дискете против где-то 6-7 загубленных. :( Флоппик дерьмовый был, или это его так до ручки довели, - не суть... Абыдно было до жути)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

7. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от andr.mobi (??) on 24-Ноя-08, 14:21 
Да, вот это железяка хакеру на стол! Числогрыз! И реально недорого! А лет через десять такая машина будет стоить около $1000, наверное. Однако
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

9. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от mv (??) on 24-Ноя-08, 14:45 
И чего на ней грызть? single-float в научных расчётах никому нафиг не сдался. Даже double-float не везде хватает.
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

26. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от Ононим on 26-Ноя-08, 08:56 
>И чего на ней грызть? single-float в научных расчётах никому нафиг не
>сдался. Даже double-float не везде хватает.

брутфорс целочисленных ключей ^_^

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

8. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от andr.mobi (??) on 24-Ноя-08, 14:26 
И ЛягуНаРельсы(c), если через 10 лет тогдашний маздай не будет отжирать 50% процессоров этого монстра для какой-нибудь банальности, типа копирования файлов
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

10. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от Игорь email(??) on 24-Ноя-08, 15:23 
а на старом уже не катит, думали, думали и наконец...
"по производительности равный кластеру из 300 ПК с Intel Core 2 Duo 2.4GHz. На днях компания NVIDIA официально представила похожий продукт" - это как???
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

11. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от Georges (ok) on 24-Ноя-08, 17:35 
Нвидию допёрло что можно сделать кластер
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

12. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от Frank email(??) on 24-Ноя-08, 17:36 
Видимо, имеется ввиду, что такое же Г... :)
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

14. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от Аноним (??) on 24-Ноя-08, 17:46 
>а базе четырех видеокарт NVIDIA GeForce 9800 GX2 (в сумме 8 GPU), по
>производительности равный кластеру из 300 ПК с Intel Core 2 Duo 2.4GHz

Чет я не понял, как такое может быть...Всегда вроде видеокарты были слабее процессоров...У моей 6800 GT, например, 350 мегагерц всего, а у процессора в 10 раз больше...

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

15. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от PereresusNeVlezaetBuggy email(ok) on 24-Ноя-08, 17:50 
>>а базе четырех видеокарт NVIDIA GeForce 9800 GX2 (в сумме 8 GPU), по
>>производительности равный кластеру из 300 ПК с Intel Core 2 Duo 2.4GHz
>
>Чет я не понял, как такое может быть...Всегда вроде видеокарты были слабее
>процессоров...У моей 6800 GT, например, 350 мегагерц всего, а у процессора
>в 10 раз больше...

А вы в лес за грибами поедете на Lamborgini Diablo SV или на УАЗ 469Б? ;)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

22. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от ezhik on 26-Ноя-08, 01:23 
> А вы в лес за грибами поедете на Lamborgini Diablo SV или на УАЗ 469Б? ;)

За грибами на УАЗ. А за кокосами на Lamborgini сподручнее. На чем за плюшками не определился.

Шутка.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

23. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от PereresusNeVlezaetBuggy email(ok) on 26-Ноя-08, 01:35 
>> А вы в лес за грибами поедете на Lamborgini Diablo SV или на УАЗ 469Б? ;)
>
>За грибами на УАЗ. А за кокосами на Lamborgini сподручнее. На чем
>за плюшками не определился.

За плюшками, как известно, сподручнее всего на пропеллере и с пылесосом. Лишь бы корицы не жалели. ;)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

16. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от Аноним (??) on 24-Ноя-08, 18:07 
>>а базе четырех видеокарт NVIDIA GeForce 9800 GX2 (в сумме 8 GPU), по
>>производительности равный кластеру из 300 ПК с Intel Core 2 Duo 2.4GHz
>
>Чет я не понял, как такое может быть...Всегда вроде видеокарты были слабее
>процессоров...У моей 6800 GT, например, 350 мегагерц всего, а у процессора
>в 10 раз больше...

Все так же думаете, что дело в мегагерцах?
Количество ядер сравни на своей видюшке и в своем процессоре.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

27. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от aurved on 26-Ноя-08, 20:57 
архитектура x86 от рождения уебищна до ужаса и в процах Intel производительность принесена в жертву совместимости с устаревшим набором команд
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

19. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил..."  
Сообщение от WhiteWind (??) on 24-Ноя-08, 20:00 
>в 1 GPU - 240 ядер
>Количество ядер сравни на своей видюшке и в своем процессоре.

Может, всё-таки, не ядер, а конвееров?

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

28. "Рекорд скорости сортировки улучшен в 3 раза. NVIDIA выпустил"  
Сообщение от const email(??) on 27-Ноя-08, 18:17 
> Может, всё-таки, не ядер, а конвееров?

Хоть горшком назови. Почти всю работу эти ядра-конвейеры делят между собой и выполняют параллельно. По аналогии с ядрами CPU.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Индекс форумов | Темы | Пред. тема | След. тема
Оцените тред (1=ужас, 5=супер)? [ 1 | 2 | 3 | 4 | 5 ] [Рекомендовать для помещения в FAQ]




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру