The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запросов, opennews (??), 18-Фев-24, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


10. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от penetrator (?), 18-Фев-24, 14:50 
> DuckDB is a fast in-process analytical database

кто-нибудь может объяснить это как?

олап кубы это же подготовили в фоне для будущего массивного чтения

а что делать если это в пределах моего процесса? т.е. скрыть наличие еще одной базы? и стучаться к локальному файлу? а зачем?

что я не понял?

Ответить | Правка | Наверх | Cообщить модератору

23. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Аноним (-), 18-Фев-24, 17:45 
>олап кубы это же подготовили

Ты где-нибудь рабочие olap-системы вживую видел? У меня вот в вузе одна такая была, сервер насиловали одновременно 30 человек и было проще стянуть базу и сделать дома, чем насиловать в 30 рыл один сервер за 40 минут, когда запрос проходил за 20. Дома этот запрос на sqlite проходил за пять - никто не насиловал диск в 30 рыл.

Ответить | Правка | Наверх | Cообщить модератору

31. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от penetrator (?), 18-Фев-24, 19:27 
так может это не OLAP? а OLTP?

странная оптимизация под запросы, если он потом выполняется 20 минут

Ответить | Правка | Наверх | Cообщить модератору

39. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Аноним (39), 18-Фев-24, 21:39 
У нас был redshift на aws проекте, было норм как data lake
Ответить | Правка | К родителю #23 | Наверх | Cообщить модератору

42. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Аноним (39), 19-Фев-24, 05:37 
Дак ты сравнил тоже. Российские вузы в среднем неплохо обучают фундаменталке, что не мешает им быть рассадником профнепригодного технического персонала, сроду не имевшего опыта работы в коммерческих IT-компаниях, в силу чего уровень администрирования чего-либо в вузах чудовищно убог.
Ответить | Правка | К родителю #23 | Наверх | Cообщить модератору

45. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +1 +/
Сообщение от Аноним (-), 19-Фев-24, 10:06 
>Дак ты сравнил тоже. Российские вузы в среднем неплохо обучают фундаменталке

В среднем по России образование отсталое. И обучают фундаменталке плохо.

Ответить | Правка | Наверх | Cообщить модератору

47. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +1 +/
Сообщение от Аноним (39), 19-Фев-24, 10:24 
Дискретке и алгоритмам обучают нормально, всякие нейросети студенты сами осилят
Ответить | Правка | Наверх | Cообщить модератору

48. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Витюшка (?), 19-Фев-24, 10:48 
Нейросетям обучают офигенно.

Особенно в ВШЭ, я сам туда как-то планировал поступать на Machine Learning в магистратуру. Но потом передумал (уже специалист).

В МФТИ скорее всего очень хорошо обучают, в МГУ.

Есть офигенный курс по Deep Learning от НГУ, кажется. Его читал мужчина прямо из Кремниевой Долины (наш, русский).

А так... в каком-нибудь Арканзасском Университете ничерта не обучают нейронкам нормально тоже.

Более того смотрел лекции и слайды от топовых мировых университетов американских. Там там просто ужас и кошмар, разобраться в этом невозможно. В общем зависит от курса к курсу.

Ответить | Правка | Наверх | Cообщить модератору

49. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Бывалый Смузихлёб (ok), 19-Фев-24, 11:44 
> А так... в каком-нибудь Арканзасском Университете ничерта не обучают нейронкам нормально
> тоже.
> Более того смотрел лекции и слайды от топовых мировых университетов американских. Там
> там просто ужас и кошмар, разобраться в этом невозможно. В общем
> зависит от курса к курсу.

А зачем им это с махрово-платным образованием ?
Чем лучше открытые курсы и лекции - тем меньше смысла студенту брать кредит( который не спишут при банкротстве ) и дарить деньги ВУЗу

Ответить | Правка | Наверх | Cообщить модератору

52. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Витюшка (?), 19-Фев-24, 15:22 
Не знаю, но образование ты таким образом не получишь. Как минимум нет экзаменов (проверка усвоенного материала) в конце курса, часто выложены только слайды, видео нет. Или нет проверок заданий (где ручкой нужно что-то писать).

Думаю в основном это инициатива самого лектора. Есть буквально самый лучший в мире курс лекций по базам данных от Andy Pavlo. Там есть всё. Включая возможность писать код и прогонять через их систему тестов.

Но для Advanced Database Systems уже в основном только лекции.

Ответить | Правка | Наверх | Cообщить модератору

50. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Бывалый Смузихлёб (ok), 19-Фев-24, 11:53 
> В среднем по России образование отсталое. И обучают фундаменталке плохо.

Это смотря кто и как считает
Некоторые любят рассказывать сказки про американское супер-образование, но, почему-то огромное количество идей и достижений получается за счёт приезжих 1-2 поколения( бСССР / азия )
Тогда как итогом чисто американского образования( 2+ поколение жителей штатов ) является исчезающе-малое количество открытый, наработок и прочего

Ответить | Правка | К родителю #45 | Наверх | Cообщить модератору

54. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +1 +/
Сообщение от Аноним (-), 19-Фев-24, 18:34 
В твоём сообщении смешаны времена, люди и кони.
1. Советское/Российское образование самое лучшее в мире - это ложь.
2. Вклад Русских эимгрантов в американское образование и науку ничтожен, там лидируют китайцы и индусы.
3. Американское образование лучшее в мире - это тоже ложь. Разрекламированные и богатые коллежди типа Гарвард, МТИ, Принстон, это уже другая история.

В СССР был массовый отбор одарённых детей по всей стране. Эти дети сначала учились в математических классах, потом поступали в МФТИ или МГУ, потом они должны были трудится в советских НИИ, где они осваивали ворованные иностранные технологии. Самим им государство не разрешала разрабатывать технологии. Эти дети были с приобретёнными психическими расстройствами. Получил двойку - опозорил родителей, подвёл Родину. Разрушительный "культ отличника". Некоторые дети умели читать и писать с двух лет, с трёх сочиняли стихи - передаю привет их родителям, если они ещё живы.

США. В обществе презирают наку, если эта наука не приносит доход. Причём американцу нужны быстрые деньги. Ну и, компьютеры это святое, да и  монетизация в сфере IT неплохая, поэтому среди американцев и много лауреатов премии Тьюринга.

Сейчас происходит глобализация, если вам важны качественные знания а не корочка, то ищите преподователей а не учебные заведения. Как ни странно есть отличные преподователи среди индусов, да-да они разговаривают по английски с индусским акцентом. Есть замечательные учителя математики среди китайских эммигрантов.

Ответить | Правка | Наверх | Cообщить модератору

43. "Выпуск DuckDB 0.10.0, варианта SQLite для аналитических запр..."  +/
Сообщение от Витюшка (?), 19-Фев-24, 08:15 
OLAP кубы - это древняя технология. Попытка добавить аналитику в OLTP (row-store) базы данных. Нужно заранее их готовить, на конкретные запросы.

Сейчас хотят из коробки иметь аналитические запросы. Для этого и создали OLAP (column-store) базы данных.

Там на индексы пофиг, на транзакции пофиг (в целом). Главное иметь быстрый table scan - сканирование всей таблицы с диска. И читать только несколько колонок (для этого и сделали column-store хранилище).

Ответить | Правка | К родителю #10 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру