[alibek]

29 минут назад, snvoronkov сказал:

которая не переписывает дисковые блоки индекса при добавлении записей

Я разве это говорил?

[snvoronkov]

Только что, alibek сказал:

Я разве это говорил?

Тогда какие возражения про то, что количество переписывания блоков на SSD будет "слегка" выше, чем "один раз на емкость"?

 

14 минут назад, Tosha сказал:

Индексы так же можно строить не на лету а по уже готовым порциям данных за день, например.

Это не нам решать. Оглашенные требования "тов. майоров" предусматривают жесткое и непрерывное индексирование. (Время ответа на запрос крайне мало.)

[alibek]

3 минуты назад, snvoronkov сказал:

Тогда какие возражения про то, что количество переписывания блоков на SSD будет "слегка" выше, чем "один раз на емкость"?

Именно для Яровой никакой проблемы (при правильной организации) 1000 циклов перезаписи не представляет, этого более чем достаточно.

Данные записываются/перезаписываются редко, индексы чаще, но и для них ресурса будет достаточно, если для них выделить необходимое дисковое пространство и перезаписывать в его рамках.

 

7 минут назад, snvoronkov сказал:

Оглашенные требования "тов. майоров" предусматривают жесткое и непрерывное индексирование.

Не вижу проблемы.

Индекс в памяти, раз в час сбрасывается на диск, после заполнения диска уже не меняется.

[snvoronkov]

6 минут назад, alibek сказал:

Индекс в памяти, раз в час сбрасывается на диск, после заполнения диска уже не меняется.

Т.е., под ЭТИ SSD разработчик СХД-Яровая еще и движок БД писать будет? 8-(

А ему не опухнется?

[alibek]

Только что, snvoronkov сказал:

еще и движок БД писать будет

Детский сад.

Требования довольно специфичные, поэтому нужна не универсальная СУБД, а специализированная.

Ничего сложного в этом не вижу, любая СВН в своем видеоархиве именно такую БД и реализует.

К тому же лично я бы делал не БД на файловой системе, а специализированную файловую систему под эту задачу.

[Черномазов]

1 час назад, alibek сказал:

криворуких программистов

Где я вам других-то найду?

[fhunter]

3 часа назад, snvoronkov сказал:

СУБД, которая не переписывает дисковые блоки индекса при добавлении записей - в студию!

Есть файловые системы построенные по принципу логгирования. https://ru.wikipedia.org/wiki/NILFS

Подойдёт? (Как один из вариантов).

[snvoronkov]

Ладно. Почти убедили. Поживем - увидим.

 

Только сдается мне, что реализовано это будет не на SSD, а на обычных HDD, купленных в Китае по дешевке.

[nemo_lynx]

30 минут назад, snvoronkov сказал:

Только сдается мне, что реализовано это будет не на SSD, а на обычных HDD, купленных в Китае по дешевке.

А смысл в этом для разработчика или продавана? Эти господа в любом случае свою долю урвут, им всё равно что продавать - они своё просто сверху накручивают. А вот что касается покупателя поделий, то если у оного есть хотя бы зачатки разума, то он не будет покупать СХД таких масштабов на механике ни за какую дешёвку. Ибо есть такая неприятная неизбежность - OPEX. Шум, тепловыделение и энергопотребление никто не отменял, и оно требует от владельца затрат.

[snvoronkov]

27 минут назад, nemo_lynx сказал:

Шум, тепловыделение и энергопотребление никто не отменял, и оно требует от владельца затрат.

А время жизни, срок амортизации и начальные вложения - очевидно, отменили?  :-)

[alibek]

Время жизни при подобной эксплуатации будет немалым.

Скорее всего куда больше, чем на HDD.

[nemo_lynx]

2 минуты назад, snvoronkov сказал:

А время жизни, срок амортизации и начальные вложения - очевидно, отменили?  :-)

Чё, опять? Про время жизни - начните перечитывать трэд заново. Особенно внимательно вчитывайтесь в свои же слова:

1 час назад, snvoronkov сказал:

Ладно. Почти убедили. Поживем - увидим.

 

[st_re]

2 минуты назад, snvoronkov сказал:

А время жизни, срок амортизации и начальные вложения - очевидно, отменили?  :-)

ну для хранения на пол года SSD пойдет по всем критериям, кроме цены. пререписывать раз в 6 месяцев оно точно сможет на все время пока человечество не придумает других систем хранения.. но вот хранить петабайты на ssd, при нынешних ценах даже на китайские... а уж если это будет "отечественная" разработка.. разорится любой провайдер, даже чемпион.

[snvoronkov]

1 час назад, nemo_lynx сказал:

Чё, опять? Про время жизни - начните перечитывать трэд заново. Особенно внимательно вчитывайтесь в свои же слова:

 

Ага. Опять.

 

Вызывают сомнения:

1) способность и желание тех-же разрабов "СДХ-Яровая" заморачиваться со специализированной БД под твердотельники. А если этого не сделать, оно сдохнет цикла за три записи в него номинального объёма за счёт люто-бешеного переписывания индекса.

2) возникают сомнения, что разрабы прошивки к этим твердотельникам успеют хорошо реализовать и отладить Трим. А без этого оно сдохнет даже не дописав одного номинала.

3) энергопотребление жёсткого в простое таки меньше.

4) цена отличается в разы.

[NN----NN]

В описании характеристик (есть ссылка на pdf) сообщается, что в гибридной СХД TATLIN могут работать одновременно диски типов NVMe/SAS SSD и SAS/NL-SAS/SATA. Гибкая архитектура позволяет применять TATLIN для выполнения разных задач, можно начать с небольшой и быстрой системы, используя только флеш-диски, а потом увеличить объёмы хранения данных, перейдя к гибридной конфигурации.

 

https://nag.ru/news/newsline/100238/-rosteh-sovmestno-s-drugimi-kompaniyami-predlojit-petabaytnuyu-shd-dlya-zakona-yarovoy-.html

[Sergey Cheban]

On 3/27/2018 at 7:21 AM, snvoronkov said:

Первое - отнюдь не второе. Оно под 1000 циклов рассчитано. Т.е., совсем дерьмо.

Если хранить информацию нужно в течение месяца, то 1000 циклов хватит на 80 лет. А за это время или эмир, или ишак...

 

Но вообще-то я верю, что эту дурь рано или поздно вообще отменят. Слишком дорого и, с учётом повсеместного SSL, абсолютно бессмысленно. И ожидание отечественного производителя - шаг именно в этом направлении.

[nemo_lynx]

11 часов назад, Sergey Cheban сказал:

Но вообще-то я верю, что эту дурь рано или поздно вообще отменят. Слишком дорого и, с учётом повсеместного SSL, абсолютно бессмысленно. И ожидание отечественного производителя - шаг именно в этом направлении.

К сожалению, Товарищи Офицеры категорически убеждены, что проблема с SSL вполне решается путём нагибания хостеров на выдачу ключей к сессиям и блокировкой всех упрямых. Да, да, вплоть до всего ютуба. Ибо, нехер гражданам чушь смотреть, работать надо на благо Родины. Кто не согласен - чемодан/вокзал/заграница. Если ютуб не блокировали до переназначения Самого, это вовсе не означает, что блокировать не станут и дальше ;) . Товарищей Офицеров очень сильно стимулирует опыт американских (представьте себе, у них нет никаких проблем с дешифровкой SSL :) ), китайских и северо-корейских коллег.

Ну, а вопрос цены для Товарищей Офицеров - это вообще как вопрос индейцев для шерифа... Если операторы при этом выжить смогут "не только лишь все" (с) Кличко, вот и славненько! Чем меньше возникающих, тем проще их руками контролировать охлос.

[fhunter]

3 часа назад, nemo_lynx сказал:

К сожалению, Товарищи Офицеры категорически убеждены, что проблема с SSL вполне решается путём нагибания хостеров на выдачу ключей к сессиям и блокировкой всех упрямых. Да, да, вплоть до всего ютуба. Ибо, нехер гражданам чушь смотреть, работать надо на благо Родины. Кто не согласен - чемодан/вокзал/заграница. Если ютуб не блокировали до переназначения Самого, это вовсе не означает, что блокировать не станут и дальше ;) . Товарищей Офицеров очень сильно стимулирует опыт американских (представьте себе, у них нет никаких проблем с дешифровкой SSL :) ), китайских и северо-корейских коллег.

Ну, а вопрос цены для Товарищей Офицеров - это вообще как вопрос индейцев для шерифа... Если операторы при этом выжить смогут "не только лишь все" (с) Кличко, вот и славненько! Чем меньше возникающих, тем проще их руками контролировать охлос.

А можно какой-то пруф про американцев, а то те события, которые известны - это точечные воздействия на отдельных людей, а не массовая дешифровка SSL. Массовые были разве что DigiNotar (ну и где он - по отлову, такое автоматом уходит в чёрный список в нормальных браузерах - что эквивалентно банкротству для CA).
Китайцы и северо-корейцы - тут интереснее. У северокорейцев как минимум за людьми следит их собственная операционная система и браузер - https://www.whitehatsec.com/blog/north-koreas-naenara-web-browser-its-weirder-than-we-thought/ . По операционной системе ищите детали сами, там были интересные штуки, типа дописывания в медиафайлы тегов - где они проигрывались и подобных штук. С ходу я найти ссылку не могу, где операционную систему потрошили.

 

Если коротко - то для полноценного перехвата SSL - нужно либо пробить свою доверенную CA в операционную систему (и запретить распространение альтернативных операционных систем, а так же браузеров - потому что там проверка отдельная). Либо троянить компьютеры по судебному решению/массово.  (Антивирусы, которые дешифруют SSL на ходу и перешифровывают со своим сертификатом - тоже считаются ;-)).

Изменено 29 марта, 2018 пользователем fhunter

[st_re]

1 час назад, fhunter сказал:

А можно какой-то пруф про американцев, а то те события, которые известны - это точечные воздействия на отдельных людей, а не массовая дешифровка SSL.

Есть мнение, что пруфов не существует, а знания подобного рода товарищи майоры получают в основном из просмотра пиратских вражеских фильмов. Там же все просто. ну и опять же слухи, что в подвале белого дома стоит супер компьютер, который пишет весь трафик.. (причем даже тот, который через шша и не ходит). подумать головой об объемах этого щастья, не судьба..

 

Понятно что даже если те умеют расшифровывать ССЛ, то применяется оно по мере надобности. а хранить эти петабайты котиков никто в здравом и трезвом не будет.

[nemo_lynx]

Коллеги, почитайте откровения Сноудена. Уж более авторитетного пруфа, ИМХО, не найти. Он же ясно говорил, что ВСЕ соцсети предоставляют в АНБ ключи, а в конкретных случаях (по конкретному фигуранту) - полностью дешифрованные данные в любом виде за любой период. Аналогично по всем банковским транзакциям, аналогично по всем телефонным месенджерам и т.п. А теперь задайте себе вопрос - накой АНБ ключи к SSL? Очевиден ответ - трафик таки что-то где-то пишет. Да, в больших объёмах. Только там скорее всего СХД стоят не у операторов, а где-то в отдельных специализрированных ДЦ (логично их размещать максимально ближе к хостерам, а не к абонентам). И построены они за счёт весьма немалого госбюджета, на который содержится АНБ.

Так что наши спецслужбы не смотрят вражеские фильмы, они оперируют разведданными. И истекают завистливой слюной... Так как вполне себе понимают - в действующей реальности либерально-финансового блока в правительстве им (спецслужбам) даже и мечтать бессмысленно о каких-то там бюджетах. Сидящие на деньгах делиться не будут. Потому как, во-первых, жадные, а во-вторых, живут в парадигме, что все финансы должны работать на глобалистов, а не против них. А потому строить высокотехнологичные системы спецслужбы будут единственным доступным способом - за счёт частного бизнеса и охлоса.

[st_re]

ну ключи могут понадобиться не для расшифровки трафика (в современном мире ключи от SSL сертификата  в этом как раз не помогу совсем, трафик шифруется другими ключами, они  короткоживущие, можно конечно сливать их, но это постоянный процесс.).. А вот помитмить когото, не палясь помогут (сертификат  будет просто тот же,а не похожий, т.е. вы просто ничего не заметите, даже если параноик).. 

 

[jffulcrum]

2 часа назад, nemo_lynx сказал:

Он же ясно говорил, что ВСЕ соцсети предоставляют в АНБ ключи

Насколько помню, он говорил, что АНБ зеркалировала обмен между front-end и back-end, где трафик был уже расшифрованный самим Гуглом/Свитером/Пейсбуком и т.п. После его откровений те отрапортовали общественности, что стали делать сквозной SSL, до бек-енда, но только кто это проверит...

[Галушко Дмитрий]

на Кросе расскажем про проект реализации Яровой. Приходите на Юр.секцию! Из Б3 обещались...

[nemo_lynx]

В 27.03.2018 в 15:46, fhunter сказал:

Лично я не поливаю говном...

Или то, что локально у нас не может быть производства микросхем с топологией точнее 90нм - это, насколько я знаю, последнее, что продали России. С текущей политической ситуацией получить более новое оборудование скорее всего не получится.

Насчёт технологий точнее 90нм сделаю апдейт Вашим знаниям:

https://www.ixbt.com/news/2017/11/09/elise--rossijskij-28nanometrovyj-processor-dlja-interneta-veshej-sistem-kompjuternogo-zrenija-i-mnogih-drugih-zadach.html

[jffulcrum]

@nemo_lynx Стесняюсь обратить внимание, но там не написано, ГДЕ их изготавливают (сами чипы). Судя по тому, что все компоненты лицензированные, его и делают не у нас, наши в лучшем случае кристалл спроектировали, а печатают где-нибудь на Тайване, как и у МЦИСТ