(no subject)

[livelight]

Несмотря на все успехи технического прогресса, по-прежнему самое популярное средство анализа Big Data - это затарить, загзипить и стереть.

П.С.: неужели про это ещё не было комикса на XKCD?

Comments

[justy-tylor.livejournal.com]

Скорее новомодное. Раньше был просто /dev/null

[dikiy-mujchina.livejournal.com]

о1. Народ Любит Сложности, Чтоб Потом Их Преодолевать.
2. Надо Менять Технологии, Ибо Нах Ты Тут Аки Инженер.
3. null - Постоянен, gzip Можно Поменять На Bzip2, А То И На Xz. А Поиграться С Опциями?
...

[livelight]

Всегда логи ротировали, перекладывали с место на место, архивировали и только потом отправляли в /dev/null :)

[justy-tylor.livejournal.com]

То админские логи. А по религии бигдаты записывать требуется намного больше.

[livelight]

По религии бигдаты, надо найти какие-нибудь корреляции, применить алгоритмы анонимизации данных и алгоритмы обработки зашифрованных данных с zero disclosure. После чего сложить сырые и обработанные результаты куда-нибудь в надежде, что до них у кого-нибудь дойдут руки, а после достаточного их устаревания - стереть, потому что уже новые петабайты бигдаты подвалили.