Дело в том, что поддержка HEVC исправляется расширением набора инструкций. А вот сильно ускорить машинное обучение — это большая проблема. Нужно увеличивать количество ядер.
через 2-3 года наверняка появится железная поддержка, какой-нибудь ускоритель машинного обучение
Этот кодек в 100 раз медленнее допустимого. В 100 раз увеличить количество ядер? Именно для этого кодека?
Чтобы это стало научной работой:
1) надо сделать кодек в существующие выч. наборы инструкций
2) делать оценку качества кодека на кросс-валидации, а не на тренировочных данных.
Согласен. Просто johnfound тонко шутит и не всем понятно.
А шутку я объясню:
кодеки разрабатываются для существующих наборов вычислительных инструкций, чтобы у всех быстро проигрывалось на реальных машинах. Авторы статьи такой задачи вообще не ставят. И в результате сделали кодек в сотни раз медленнее. Зато оптимизировали какой-то другой параметр на 20%.
А в конце статьи пишут
Остаётся надеяться только на увеличение мощности графических процессоров в будущем
Своим ответом
Не, не будет больше увеличения мощности.
johnfound как бы намекает, что надо делать кодек для тех вычислительных устройств которые есть сейчас.
Верно, причём современные медиа форматы очень сильно оптимизируются также под быстрое набор инструкций потребительских ПК. Создатели существующих кодеков даже не ставили такой (непрактичной) задачи, которую поставили авторы статьи.
И я думаю, что стоит применить ML для создания кодека оптимизированного под реальный набор инструкций. Только вот эта задача уже настоящая и практическая, и даже просто среднего результата будет очень сложно добиться.
Спасибо большое. Не слушайте никого. Сейчас разбираюсь с гугл докс апишкой, у вас есть некоторые полезные вещи. Код плох, но никто не заставляет читателей копипастить.
По поводу, что уровень не хабровский — как раз хабровский. Хабра-снобы пусть расслабятся. Если кому-то не стыдно за свой код пятилетней давности — значит он не развивается.
Ещё раз спасибо за статью.
Если разрешить пиариться всем, то зачем кому-то другому платить за это деньги?)
Не поверите, но есть множество разных сервисов, в которые есть платные и бесплатные тарифы. Вопрос что отнести в бесплатный сервис, а что в платный — всегда непростая задача для продакт-менеджмента. Но если она решена неправильно, то начинает накапливаться негативный эффект.
В примере с хабром — платный контент пропустят даже самого низкого качества.
А самой лучшей статье нельзя вспомнить ни о чём, с чем связан автор статьи.
писать рекламу
Я рекламу не писал.
А писать хорошие статьи компании вроде бы и не обязаны
Видите, вы и сами, рассуждая, приходите к таким же выводам.
Согласен. Причём даже этот пост в стиле — "давайте обнажимся и будем искренними" — тоже полный фейк. Хабра-пипл хавает.
А жаль. На самом деле, чтобы стать лучше, хабру нужно просто разрешить пиариться всем, а не тем, кто денег заплатил. Мне в статье не разрешили даже одну ссылку на продукт поставить, а у меня бюджетов корпоративных нету. Поэтому и будет здесь только корпоративная посредственность. А без конкуренции по качеству контента — сползание к дну.
Жадность хабра погубит.
Алексей, спасибо большое за интересные материалы. Подскажите, к кому можно обратиться за экспертным советом в области eCommerce?
Вы у многих достойных людей брали интервью ;) и это было бы очень полезно для нас. Спасибо!
SQLite однопоточная база данных, поэтому ввод-вывод вполне может быть не оптимальный.
На всякий случай: браузерный JavaScript тоже однопоточный.
Обработка данных в классических базах данных многопоточная. И причём задачи обработки массивов данных очень прекрасно распараллеливается.
Думаю, что с вводом-выводом тоже есть проблемы, и не только у SQLite.
Дело в том, что поддержка HEVC исправляется расширением набора инструкций. А вот сильно ускорить машинное обучение — это большая проблема. Нужно увеличивать количество ядер.
Этот кодек в 100 раз медленнее допустимого. В 100 раз увеличить количество ядер? Именно для этого кодека?
Наверное вы хотели сказать про более дорогой интернет тариф.
Чтобы это стало научной работой:
1) надо сделать кодек в существующие выч. наборы инструкций
2) делать оценку качества кодека на кросс-валидации, а не на тренировочных данных.
Согласен. Просто johnfound тонко шутит и не всем понятно.
А шутку я объясню:
кодеки разрабатываются для существующих наборов вычислительных инструкций, чтобы у всех быстро проигрывалось на реальных машинах. Авторы статьи такой задачи вообще не ставят. И в результате сделали кодек в сотни раз медленнее. Зато оптимизировали какой-то другой параметр на 20%.
А в конце статьи пишут
Своим ответом
johnfound как бы намекает, что надо делать кодек для тех вычислительных устройств которые есть сейчас.
Верно, причём современные медиа форматы очень сильно оптимизируются также под быстрое набор инструкций потребительских ПК. Создатели существующих кодеков даже не ставили такой (непрактичной) задачи, которую поставили авторы статьи.
И я думаю, что стоит применить ML для создания кодека оптимизированного под реальный набор инструкций. Только вот эта задача уже настоящая и практическая, и даже просто среднего результата будет очень сложно добиться.
Спасибо большое. Не слушайте никого. Сейчас разбираюсь с гугл докс апишкой, у вас есть некоторые полезные вещи. Код плох, но никто не заставляет читателей копипастить.
По поводу, что уровень не хабровский — как раз хабровский. Хабра-снобы пусть расслабятся. Если кому-то не стыдно за свой код пятилетней давности — значит он не развивается.
Ещё раз спасибо за статью.
Не поверите, но есть множество разных сервисов, в которые есть платные и бесплатные тарифы. Вопрос что отнести в бесплатный сервис, а что в платный — всегда непростая задача для продакт-менеджмента. Но если она решена неправильно, то начинает накапливаться негативный эффект.
В примере с хабром — платный контент пропустят даже самого низкого качества.
А самой лучшей статье нельзя вспомнить ни о чём, с чем связан автор статьи.
Вы же прекрасно знаете, что всё сделано так, чтобы это оставалось лишь теорией.
Согласен. Причём даже этот пост в стиле — "давайте обнажимся и будем искренними" — тоже полный фейк. Хабра-пипл хавает.
А жаль. На самом деле, чтобы стать лучше, хабру нужно просто разрешить пиариться всем, а не тем, кто денег заплатил. Мне в статье не разрешили даже одну ссылку на продукт поставить, а у меня бюджетов корпоративных нету. Поэтому и будет здесь только корпоративная посредственность. А без конкуренции по качеству контента — сползание к дну.
Жадность хабра погубит.
Спасибо
Это будет в каком-то городе проходить?
В Яндексе Нирвана и Кокаин идут рука об руку
Спасибо!
Алексей, спасибо большое за интересные материалы. Подскажите, к кому можно обратиться за экспертным советом в области eCommerce?
Вы у многих достойных людей брали интервью ;) и это было бы очень полезно для нас. Спасибо!
Да, я тоже зря сюда зашёл
Очень полезная статья. Как раз сейчас делал таблицы, и в этой статье прямо готовые ответы.
Спасибо!
https://dendibakh.github.io/blog/2018/01/18/Code_alignment_issues
P.S.: ссылка есть в самом начале статьи.
Очевидно. И у меня именно к этому претензия. К слову «ждут».
Дно само не придёт, его надо сделать. То есть выправить график вверх. А не искать дно внизу.
Пропагандисты правительства рассказывают, что ухудшая ситуацию они её улучшают: ищем дно.