Вариант для распечатки		Пред. тема | След. тема
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Яндекс открыл YTsaurus, платформу для обработки и хранения больших объёмов данных, opennews (??), 23-Мрт-23, (0) [смотреть все] Скрыто модератором, Аноним (1), 16:04 , 23-Мрт-23, (1) +10 // Скрыто модератором, Аноним (2), 16:08 , 23-Мрт-23, (2) +3 Скрыто модератором, Аноним (9), 16:51 , 23-Мрт-23, (9) Скрыто модератором, пох. (?), 21:29 , 23-Мрт-23, (45) Утечка в сеть 40Гб аркадии, по прошествии месяца теперь называется яндекс откры, Аноним (4), 16:13 , 23-Мрт-23, (4) +13 // Да теперь открытое управление инфраструктурой будет не только у я но и у всех к, Аноним (9), 16:49 , 23-Мрт-23, (8) // Какому дураку придет в голову строить свою экосистему на базе продукта конкурент, Аноним (93), 14:47 , 31-Мрт-23, (93) В утечке вроде этого не было, Вы забыли заполнить поле Name (?), 19:18 , 23-Мрт-23, (29) +7 И правильно сделали Код всё равно утёк, коммерческой тайной его не прикрыть А , Товарищ майор (ok), 10:21 , 24-Мрт-23, (69) +1 Из него можно вытянуть отдельно хранилище , 11 (?), 16:48 , 23-Мрт-23, (7) // Данные яндекс-яды уже кто-то вытянул Ты тоже можешь попробовать , пох. (?), 21:29 , 23-Мрт-23, (46) –2 Как это связано с похмел-fs , Аноним (20), 18:11 , 23-Мрт-23, (20) // никак, только тем что оба из яндекса, koct9i (ok), 21:49 , 23-Мрт-23, (51) Кто-нибудь вообще будет обсуждать технические подробности или так и будут кричат, InuYasha (??), 18:32 , 23-Мрт-23, (24) –2 // Ну вот посмотрел я на архитектуру - и откровенно не понимаю кому-то кроме яндех, Tron is Whistling (?), 19:06 , 23-Мрт-23, (26) +2 // Тому кто сейчас развернул у себя хадуп , Вы забыли заполнить поле Name (?), 19:32 , 23-Мрт-23, (34) –1 // Хавдупа по крайней мере гомогенна , Tron is Whistling (?), 21:31 , 23-Мрт-23, (47) +1 А тут намесили оверлеев - плакать хочется , Tron is Whistling (?), 21:35 , 23-Мрт-23, (49) Как будто ты его вообще сможешь поддерживать Если уж даже из клячхауса во все с, пох. (?), 21:31 , 23-Мрт-23, (48) +2 // Абсолютно фак т , Tron is Whistling (?), 21:36 , 23-Мрт-23, (50) +1 Ну Якитория, например, использует С админкой спокойно справляется 3 человека с, Товарищ майор (ok), 10:23 , 24-Мрт-23, (70) // Само-то оно - не стоит, чтоль Отдельный вопрос - зачем этот монстр якитории и от, пох. (?), 11:58 , 24-Мрт-23, (76) +1 Вы определитесь, для этого нужны 3 гения или оно само стоять должно , Товарищ майор (ok), 09:26 , 27-Мрт-23, (86) –1 У меня два стандартных вопроса как и нафига , Tron is Whistling (?), 21:38 , 24-Мрт-23, (78) +1 Тому, у кого в хадупе больше 500 машин, и, поэтому, приходится из распределять п, Аноним (89), 13:28 , 27-Мрт-23, (89) // Ну я и говорю - кроме яндеха наверное никому Потому что сами понимаете, за пре, Tron is Whistling (?), 17:17 , 27-Мрт-23, (90) +1 а что там обсуждать Слишком жирное, монструозное и специализированное для обыч, Бывалый Смузихлёб (??), 19:33 , 23-Мрт-23, (35) +2 На гитхаб выложили по идее их должны забанить, ведь яндекс под санкциями, Вы забыли заполнить поле Name (?), 19:26 , 23-Мрт-23, (32) // Яндыкс под чужим ником выложил, . (?), 21:11 , 23-Мрт-23, (43) Не Яндекс под санкциями, а директор а яндекса , погроммист (?), 00:49 , 24-Мрт-23, (60) // а зря они директоров на следующий день после введения против него санкций меняю, Аноним (65), 08:16 , 24-Мрт-23, (65) // Как ты Воложа поменяешь , Аноним (72), 11:13 , 24-Мрт-23, (72) Так уже жеж Официально объявлено что Волож - непричемыш и вообще где-то только , пох. (?), 11:27 , 24-Мрт-23, (74) +2 Работал с ней в 2016-2018 внутри Яндекса Уже тогда это была продуманная до мело, погроммист (?), 01:09 , 24-Мрт-23, (62)   // сценарий одна маленькая дырка в единой ФС один злонамеренный инсайдер-погромист , ivan_erohin (?), 07:10 , 24-Мрт-23, (64) –1   а, так это фс для файлопомойки а в новости что-то про бигдату, Аноним (65), 08:19 , 24-Мрт-23, (66)   // они там мамой клянутся что универсальная - хошь помойку, хошь бигдату как будто, пох. (?), 11:24 , 24-Мрт-23, (73) +4   Это же мягко говоря не правда В тот период ыть не умела быть единой ФС для всех, all_glory_to_the_hypnotoad (ok), 03:41 , 26-Мрт-23, (83)   // Вы бы лучше поделились информацией, как оно вообще было в работе и чего стоили т, пох. (?), 10:29 , 27-Мрт-23, (87)   хранения и обработки данных десятков тысяч пользователей - прям настоящая бигд, Аноним (91), 07:24 , 28-Мрт-23, (91)   да это просто бомба, если работает, как описано , Big Robert TheTables (?), 17:05 , 24-Мрт-23, (77) // В смысле уж рванет так рванет , пох. (?), 10:30 , 27-Мрт-23, (88) Зачем на гитхаб , Илья (??), 21:45 , 24-Мрт-23, (79) Знакомый сценарий 1 Дуров вышел из вконтакта 2 Утечка кода из ВК 3 Новый, нев, Serg (??), 16:23 , 29-Мрт-23, (92) // ничего, увы Волож потому и держался до последнего за яндекс, что прекрасно знае, пох. (?), 23:14 , 31-Мрт-23, (94) 4,7,20,24,32,62,77,79,92

Сообщения

[Сортировка по времени | RSS]

62. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	+/–
Сообщение от погроммист (?), 24-Мрт-23, 01:09
Работал с ней в 2016-2018 внутри Яндекса. Уже тогда это была продуманная до мелочей система, которой пользуются почти все отделы как единой ФС для данных всей компании. Тысячи человек и роботов ежедневно запускали джобы поверх тысяч нод *единого* кластера на все отделы, и очень редко когда он уходил в даунтайм. Очень продуманная система ACL и квотирования ресурсов, бесконечная масштабируемость, и всё умещается в пару статических бинарников на C++ без всяких maven джунглей.
Ответить | Правка | Наверх | Cообщить модератору

	64. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	–1 +/–
	Сообщение от ivan_erohin (?), 24-Мрт-23, 07:10
	> которой пользуются [...] как единой ФС для данных всей компании. сценарий: одна маленькая дырка в единой ФС + один злонамеренный инсайдер-погромист = все данные всей компании улетают на. или в. > почти все отделы а, ну тогда пускай будет.
	Ответить | Правка | Наверх | Cообщить модератору

	66. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	+/–
	Сообщение от Аноним (65), 24-Мрт-23, 08:19
	>  единой ФС для данных всей компании а, так это фс для файлопомойки. а в новости что-то про бигдату
	Ответить | Правка | К родителю #62 | Наверх | Cообщить модератору

	73. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	+4 +/–
	Сообщение от пох. (?), 24-Мрт-23, 11:24
	они там мамой клянутся что универсальная - хошь помойку, хошь бигдату (как будто это не помойка), а хошь данные кредитных карт и адреса доставки яды. Ой... уплыла. Ну и фиг с ней - яндекс-то ни копейки на этом не потерял.
	Ответить | Правка | Наверх | Cообщить модератору

	83. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	+/–
	Сообщение от all_glory_to_the_hypnotoad (ok), 26-Мрт-23, 03:41
	Это же мягко говоря не правда. В тот период ыть не умела быть единой ФС для всех, каждому отделу поднимали свои инстансы. Ну и это далеко не единственный инструмент внутри Я чтобы что-то похранить и обработать.
	Ответить | Правка | К родителю #62 | Наверх | Cообщить модератору

	87. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	+/–
	Сообщение от пох. (?), 27-Мрт-23, 10:29
	Вы бы лучше поделились информацией, как оно вообще было в работе и чего стоили те даунтаймы которые "редко" по мнению предыдущего эхсперта. Как чинилось, во что выливалось...
	Ответить | Правка | Наверх | Cообщить модератору

	91. "Яндекс открыл YTsaurus, платформу для обработки и хранения б..."	+/–
	Сообщение от Аноним (91), 28-Мрт-23, 07:24
	"хранения и обработки данных десятков тысяч пользователей" - прям настоящая бигдата, целые десятки тысяч.
	Ответить | Правка | К родителю #62 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема