forum.opennet.ru

"Яндекс открыл YTsaurus, платформу для обработки и хранения больших объёмов данных"

Форум Разговоры, обсуждение новостей
Версия для распечатки	Пред. тема \| След. тема

Исходное сообщение

[ Отслеживать ]

Отдельный RSS теперь доступен для каждого обсуждения в форуме и каждого минипортала.

. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	+/–
Сообщение от погроммист (?), 24-Мрт-23, 01:09
Работал с ней в 2016-2018 внутри Яндекса. Уже тогда это была продуманная до мелочей система, которой пользуются почти все отделы как единой ФС для данных всей компании. Тысячи человек и роботов ежедневно запускали джобы поверх тысяч нод единого кластера на все отделы, и очень редко когда он уходил в даунтайм. Очень продуманная система ACL и квотирования ресурсов, бесконечная масштабируемость, и всё умещается в пару статических бинарников на C++ без всяких maven джунглей.
Ответить \| Правка \| Наверх \| Cообщить модератору

Оглавление

Яндекс открыл YTsaurus, платформу для обработки и хранения больших объёмов данных, opennews, 23-Мрт-23, 16:04 [смотреть все]

Вывод наработок в Израиль похоже идет успешно, Аноним, 23-Мрт-23, 16:04 (1) //
- - По этому вопросу вам надо спросить Рабиновича- Какого - Да любого , Аноним, 23-Мрт-23, 16:08 (2)
- Через Голландию , Аноним, 23-Мрт-23, 16:51 (9)
- да если бы в Израиль уехали яндексмобили ну и янго там всегда был - это янде, пох., 23-Мрт-23, 21:29 (45)
Утечка в сеть 40Гб аркадии, по прошествии месяца теперь называется яндекс откры, Аноним, 23-Мрт-23, 16:13 (4) //
- Да теперь открытое управление инфраструктурой будет не только у я но и у всех к, Аноним, 23-Мрт-23, 16:49 (8) //
  - Какому дураку придет в голову строить свою экосистему на базе продукта конкурент, Аноним, 31-Мрт-23, 14:47 (93)
- В утечке вроде этого не было, Вы забыли заполнить поле Name, 23-Мрт-23, 19:18 (29)
- И правильно сделали Код всё равно утёк, коммерческой тайной его не прикрыть А , Товарищ майор, 24-Мрт-23, 10:21 (69)
Из него можно вытянуть отдельно хранилище , 11, 23-Мрт-23, 16:48 (7) //
- Данные яндекс-яды уже кто-то вытянул Ты тоже можешь попробовать , пох., 23-Мрт-23, 21:29 (46)
Как это связано с похмел-fs , Аноним, 23-Мрт-23, 18:11 (20) //
- никак, только тем что оба из яндекса, koct9i, 23-Мрт-23, 21:49 (51)
Кто-нибудь вообще будет обсуждать технические подробности или так и будут кричат, InuYasha, 23-Мрт-23, 18:32 (24) //
- Ну вот посмотрел я на архитектуру - и откровенно не понимаю кому-то кроме яндех, Tron is Whistling, 23-Мрт-23, 19:06 (26) //
  - Тому кто сейчас развернул у себя хадуп , Вы забыли заполнить поле Name, 23-Мрт-23, 19:32 (34) //
    - Хавдупа по крайней мере гомогенна , Tron is Whistling, 23-Мрт-23, 21:31 (47)
      - А тут намесили оверлеев - плакать хочется , Tron is Whistling, 23-Мрт-23, 21:35 (49)
  - Как будто ты его вообще сможешь поддерживать Если уж даже из клячхауса во все с, пох., 23-Мрт-23, 21:31 (48) //
    - Абсолютно фак т , Tron is Whistling, 23-Мрт-23, 21:36 (50)
  - Ну Якитория, например, использует С админкой спокойно справляется 3 человека с, Товарищ майор, 24-Мрт-23, 10:23 (70) //
    - Само-то оно - не стоит, чтоль Отдельный вопрос - зачем этот монстр якитории и от, пох., 24-Мрт-23, 11:58 (76)
      - Вы определитесь, для этого нужны 3 гения или оно само стоять должно , Товарищ майор, 27-Мрт-23, 09:26 (86)
    - У меня два стандартных вопроса как и нафига , Tron is Whistling, 24-Мрт-23, 21:38 (78)
  - Тому, у кого в хадупе больше 500 машин, и, поэтому, приходится из распределять п, Аноним, 27-Мрт-23, 13:28 (89) //
    - Ну я и говорю - кроме яндеха наверное никому Потому что сами понимаете, за пре, Tron is Whistling, 27-Мрт-23, 17:17 (90)
- а что там обсуждать Слишком жирное, монструозное и специализированное для обыч, Бывалый Смузихлёб, 23-Мрт-23, 19:33 (35)
На гитхаб выложили по идее их должны забанить, ведь яндекс под санкциями, Вы забыли заполнить поле Name, 23-Мрт-23, 19:26 (32) //
- Яндыкс под чужим ником выложил, ., 23-Мрт-23, 21:11 (43)
- Не Яндекс под санкциями, а директор а яндекса , погроммист, 24-Мрт-23, 00:49 (60) //
  - а зря они директоров на следующий день после введения против него санкций меняю, Аноним, 24-Мрт-23, 08:16 (65) //
    - Как ты Воложа поменяешь , Аноним, 24-Мрт-23, 11:13 (72)
      - Так уже жеж Официально объявлено что Волож - непричемыш и вообще где-то только , пох., 24-Мрт-23, 11:27 (74)
Работал с ней в 2016-2018 внутри Яндекса Уже тогда это была продуманная до мело , погроммист, 24-Мрт-23, 01:09 (62) //
- сценарий одна маленькая дырка в единой ФС один злонамеренный инсайдер-погромист , ivan_erohin, 24-Мрт-23, 07:10 (64)
- а, так это фс для файлопомойки а в новости что-то про бигдату, Аноним, 24-Мрт-23, 08:19 (66) //
  - они там мамой клянутся что универсальная - хошь помойку, хошь бигдату как будто, пох., 24-Мрт-23, 11:24 (73)
- Это же мягко говоря не правда В тот период ыть не умела быть единой ФС для всех, all_glory_to_the_hypnotoad, 26-Мрт-23, 03:41 (83) //
  - Вы бы лучше поделились информацией, как оно вообще было в работе и чего стоили т, пох., 27-Мрт-23, 10:29 (87)
- хранения и обработки данных десятков тысяч пользователей - прям настоящая бигд, Аноним, 28-Мрт-23, 07:24 (91)
да это просто бомба, если работает, как описано , Big Robert TheTables, 24-Мрт-23, 17:05 (77) //
- В смысле уж рванет так рванет , пох., 27-Мрт-23, 10:30 (88)
Зачем на гитхаб , Илья, 24-Мрт-23, 21:45 (79)
Знакомый сценарий 1 Дуров вышел из вконтакта 2 Утечка кода из ВК 3 Новый, нев, Serg, 29-Мрт-23, 16:23 (92) //
- ничего, увы Волож потому и держался до последнего за яндекс, что прекрасно знае, пох., 31-Мрт-23, 23:14 (94)

Форумы | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру