Столкнулись с тем, что себестоимость растет, а продажи падают? Клиенты ушли к конкурентам при том, что их цены не ниже, а иногда и выше, чем у вас? Значит, нужно что-то менять! Узнайте секреты тех, кто сейчас лидирует на рынке, и займите их место с помощью эффективного инструмента анализа – бенчмаркинга! Что это за метод, и как правильно его применять – читайте в нашей статье!

Бенчмаркинг (англ. bench — уровень, высота и mark — отметка) – это методика и комплекс мероприятий, направленные на сбор и анализ информации об эффективных способах ведения бизнеса для внедрения успешных стратегий на собственном предприятии. Такая технология используется в области управления, в маркетинге, ведении бизнес-процессов в самых разных сферах коммерческой деятельности.

Простыми словами, бенчмаркинг – это изучение успешного опыта конкурентов или предприятий из других отраслей, для применения его в своей компании. Использование чужих достижений позволяет учиться на ошибках других, перенимая успешный опыт для оптимизации собственных бизнес-процессов.

Нужно отличать бенчмаркинг от маркетинговой разведки, т.к. в первом случае для анализа используется открытая отчетность, а во втором – добывается любая полезная информация, в том числе и конфиденциальная.

Цели и задачи бенчмаркинга – улучшение определенных показателей деятельности. Это могут быть: оптимизация расхода материалов или применение новой технологии для снижения себестоимости. Повысить прибыльность можно не только путем снижения производственных и прочих расходов, но и благодаря увеличению объемов продаж при привлечении новых клиентов, за счет улучшения качества продукта или добавления новых сервисов.

Основные параметры, которые используются при сравнении эффективности работы разных компаний.

1. Себестоимость изготовления продукции или оказания услуг, показатели производительности труда, структура затрат. Анализируются прямые и косвенные трудозатраты, расходы на оплату производственного персонала, скорость и эффективность выполнения определенных бизнес-процессов.
2. Качественные параметры продукции. Сравнивается дизайн, функциональность, удобство пользования и другие важные характеристики.
3. Расходы на маркетинг. Такой показатель рассматривается не только в денежном выражении, но и в эффективности использования того или иного инструмента продвижения.
4. Затраты на исследование и внедрение инноваций.
5. Расходы на реализацию товаров, работ или услуг.
6. Уровень удовлетворенности целевой аудитории. Определяется путем проведения опроса целевой аудитории.

В процессе анализа выявляются и фиксируются наиболее значимые отклонения и находятся различия, которые влияют на уровень эффективности тех или иных бизнес-процессов. Далее определяется лучший опыт, который можно перенести в свою компанию.

Взглянув на свой смартфон, Вы можете внезапно осознать, что чего-то не хватает. Он, конечно, делает все, что Вы хотите – и неплохо делает – однако что-то в нем недостаточно. Мы поможет Вам понять, что именно – проведем экскурсию в мир бенчмарков и тестов производительности.

Наверняка, Вы много раз видели в интернете упоминание бенчмарков. Обычно они используются для измерения производительности разных устройств с помощью одинаковых средств. Это позволяет сравнивать устройства между собой. Примером такого бенчмарка для мобильных устройств является Linpack. Однако, выдаваемые бенчмарками очки и награды не показывают нам, что именно скрывается за ними и какие именно аспекты производительности измеряются тоже не всегда ясно. Насколько мы можем доверять этим измерениям при выборе устройств и насколько они точны.

Обо всем связанном с бенчмарками и тестированием производительности мобильных устройств пойдет речь в этой статье.

Что такое бенчмарк?

Насколько аккуратны бенчмарки?

Тогда почему же мы их используем?

Производительность сетевых подключений.

Бенчмарки для Android .

Бенчмарки для Windows Phone 7.

Бенчмарки для iOS .

Бенчмарки для WebOS .

Производительность JavaScript .

Выводы.

Бенчмарк – (от англ. benchmark - ориентир, эталон) - нечто, что служит эталоном для сравнения. Иметь такие эталоны необходимо для того, чтобы знать как поведет себя объект в любых из условий. Касаемо компьютеров и связанных с ними устройств, бенчмарки позволяют сравнивать производительность этих устройств при решении каких то определенных, закрепленных задач. Полученные результаты можно будет сравнивать между собой, ведь поставленная задача одинакова для всего набора устройств.

Бенчмарки как эталон для сравнения достаточно широко распространены не только среди компьютерной техники, но и вообще везде в мире: результаты деятельности наемных рабочих, цены на нефть, проведение испытаний и так далее.

Зачем вообще они нужны? Как будет видно дальше, они не обладают особой точностью и их результаты не очень похожы на настоящую ситуацию. Единственной причиной использования является тот факт, что они стандартизованы и поэтому позволяют получать результаты сравнения неких объектов быстро и легко. Например, большая часть мобильных устройств имеет очень схожую архитектуру и производительность, нюансы не получится выявить без соответствующих инструментов.

Здесь-то на помощь и приходят бенчмарки. Они обладают четким путем измерения производительности устройств, и в большинстве случаев, быстры, универсальны и эффективны. Такие программы предназначены для вычисления скорости продукта в тех сценариях использования, в которых окажется этот продукт. Действительно, использовать для измерения только один единственный тест, отображающий только один сценарий, было бы глупо – ведь получаемый результат будет максимально далек от истинных способностей конкретного устройства.

Большинство смартфонов и коммуникаторов состоят из CPU (либо целиком системы-на-чипе), оперативной памяти, камеры, операционной системы, антенн, и некоторого набора дополнительных чипов и сенсоров. Наибольшей разницей здесь будет являться кто произвел все эти компоненты и насколько хорошо отлажено взаимодействие между ними.

Прямо говоря, бенчмарки не так аккуратны, как нам бы хотелось. В идеале – мы должны раз за разом запускать бенчмарк на одном и том же устройстве, и это должно давать одинаковый результат. Но такого нет даже близко. На скриншоте сверху приведены результаты тестирования производительности HTC Sensation 4G с перерывом в несколько минут. Как видно, разница между двумя измерениями очень существенна. Что может вызвать такую неточность?

Во-первых, обман с результатами может действительно играть роль. Все время как существовали компьютеры, были средства измерения их производительности, а также методики получения не соответствующих действительности результатов. Для производителя не составляет небольшого труда настроить свой продукт так, чтобы он показывал завышенные результаты в некоторых конкретных программах. Ведь все это позволит производителю указывать при рекламе что «в такой-то программе наш продукт быстрее, чем продукт конкурентов». Такие настройки обычно делаются за счет отбора ресурсов у других частей системы, что может сказаться на ощущениях пользователей в дальнейшем.

Во-вторых, сами бенчмарки могут попасть под обман со стороны пользователей, которые произвели соответствующие изменения со своим оборудованием. Простой пример: если разогнать CPU, работающий на частоте 1 ГГц, до 1.2 ГГц, то результат будет отличаться от тестов не разогнанных CPU. Специфические прошивки от пользователей, джейлбрейки и прочее могут вызывать неестественные результаты бенчмарков, значительно усложняя сравнение устройств между собой.

Теперь давайте представим, что никаких манипуляций с устройством не производилось. Можно подумать, что показываемый результат будет соответствовать действительности. Однако это не так. Дело в том, что результаты на свеже-включенном устройстве, и устройстве, которое активно используется уже несколько часов, будут значительно различаться. Причина в том, что мобильное устройство само по себе представляет собой достаточно сложную систему и находится под влиянием огромного числа воздействий.

Рассмотрим еще несколько факторов, влияющих на измерение с помощью бенчмарков: использование производителями специфических компонентов устройств, тип CPU или GPU, частоты, память, ее свободное количество, размер кэша, частота обновления экрана, платформа и версия операционной системы. И этот список не является исчерпывающим.

Чтобы еще больше Вас запутать, скажем что ни один бенчмарк не отображает аккуратно картину производительности устройства и не дает точные результаты. Сравнивая устройства А и Б, существует вероятность что Quadrant даст устройству А высший балл, тогда как Linpack отдаст его устройству Б. Ведь каждый тест делает упор на конкретный аспект производительности устройства, и только совокупность разнообразных тестов позволит составит более-менее пригодную для сравнения картину.

Бенчмарки не совершенны, однако люди все равно используют их. Суждения навроде «продукт А работает быстро и плавно, а продукт Б работают чуточку медленнее» не является объективным способом чтобы сравнивать устройства. Да и обзоры устройств в интеренете проводятся разными авторами, поэтому оцениваемая ими производительность является субъективной. Именно в таких ситуациях и пригождаются бенчмарки, хоть мы и установили, что они не являются точными инструментами сравнения.

Прежде всего, обзоры уважаемых ресурсов всегда проводятся на устройствах без каких-либо изменений, связанных с подгонкой устройств под бенчмарки. Это позволяет получать более адекватные результаты, чем если бы измерениями производительности занимались бы пользователи.

Далее, серьезные и большие ресурсы всегда проводят тестирование с помощью нескольких программных решений, для того чтобы получить более полную картину. Устройства подвергаются разным сценариям использования. Хорошим тоном считается делать хард-ресет перед прогоном бенчмарков, а также мерять производительность несколько раз для вычисления среднего арифметического.

Также, ни один уважающий себя обзорщик не будет строить свои выводы исключительно на результатах использования бенчмарков. Тесты производительности никогда не покажут, как будет вести себя устройство при повседневном использовании.

Вот пример сравнения трех LTE устройств для оператора Verizon, имеющих очень схожие аппаратные характеристики:

Speedtest.net

Существует большое разнообразие способов подключения к сети: WiMax, LTE, 3G, 2G и т.д. Для таких подключений важной характеристикой является скорость подключения, то есть скорость передачи данных в обе стороны. И здесь значимым инструментом выступает приложение Speedtest.net Mobile компании Ookla, которая, между прочим, является поставщиком тестов для FCC (Federal Communications Commission ). Снова напомним, что такой способ измерения отличается от ручного, когда человек будет скачивать и закачивать файлы с секундомером в руках, однако использование этого сервиса дает возможность установить стандарты.

Сервис компании Ookla измеряет пропускную способность каналов связи через обычный трансфер файлов посредством HTTP. Приложение измеряет 3 показателя: latency (время отклика, сколько проходит секунд между отправкой HTTP запроса и ответом web -сервера ), скорость скачивания (бинарный файл скачивается на устройство клиента. Используются 30 кусочков файла, крайние результаты скорости отбрасываются, остальные приводятся к среднему ) и скорость закачки обратно (случайные кусочки файла отправляются на сервер, скорость начинает считаться после отправки 50% файла ).

На данный момент, платформой, на которой содержится наибольшее количество бенчмарков, является Android. Связано ли это с open-source природой системы, или с замечательной поддержкой разработчиков, однако на платформе Android построено множество самых разнообразных устройств. Ниже перечислены самые важные бенчмарки, доступные для этой платформы.

1. Quadrant Standard

Quadrant измеряет производительность таких аспектов как CPU, операции ввода/вывода, пропускная способность памяти и 2D/3D графика. Чем выше количество финальных очков, тем более производительным считается устройство. Результаты распологаются в рамках от 200 до 3000. Сами тесты включают в себя:

• 12 тестов для CPU – сжатие/распаковка данных, подсчет контрольных сумм, ариметические операции, операции с плавающей точкой, парсинг XML файлов, декодирование аудио/видео
• 1 тест на скорость памяти
• 4 теста на обработку данных файловой системой и работой с базами данных
• 1 тест на двухмерную, и 3 теста на трёхмерную графику, состоящие из симуляции различных задач для видеоподсистемы устройства.

2. Neocore

Этот бенчмарк состоит из рендеринга сложных графических сцен (на которых роботы и танки дерутся друг с другом). Для этого используются возможности OpenGL 1.1, освещение и бамп-мэппинг. Все это в результате дает оценку насколько продвинут Ваш девайс в плане работы с трехмерной графикой.

3. Nenamark 1 и 2

Существует два бенчмарка с названием NenaMark , версии 1 и версии 2. Какой из них выбрать? Сейчас мы рекомендуем использовать версию 2 , потому что версия 1 имеет возраст уже более года и предназначалась для устройств, которые были выпущены год назад. Например Nexus One и HTC Desire с графикой Adreno 200. Первая версия использует шейдеры для создания отражений, динамических теней, частиц и игры со светом. На устройствах своего времени предполагалось что бенчмарк будет показывать результаты 10-15 кадров в секунду, так оно и было. На современных устройствах производительность графики выросла очень значительно, поэтому первая версия перестала быть актуальной, ведь результаты современных решений превышают 60 кадров в секунду в первой версии теста.

Из-за этого несоответствия сложности теста возможностям современных устройств была создана вторая версия этого теста, NenaMark 2. Эта версия по-прежнему опирается на OpenGL 2.0, однако используемые графические сцены стали значительно сложнее. Выросла геометрия сцены в 5 раз, используются более сложные для расчета шейдеры и HD текстуры. НЕ забыт и динамический свет, бамп-мэппинг и карты отражений. В результате – вторая версия лучше отображает возможности современных устройств.

4. Linpack

Linpack измеряет и сравнивает скорости процессоров уже несколько десяток лет, и теперь добрался и до мобильных устройств на Android и iOS – большинство из которых являются более быстрыми чем суперкомпьютеры времен появления этого теста (70ые гг). Программа заставляет CPU вычислять большую систему линейных уравнений, а потом выдает результат в MFLOPS — millions of floating point operations per second. Как и в случае с остальными бенчмарками – больший результат значит большую производительность.

Одним из недостатков является то, что нельзя корректно сравнивать результаты измерений прошлыми версиями программы и текущими, из-за изменений в алгоритмах и библиотеках программы, направленных на оптимизацию под современное оборудование с большими возможностями.

Количество приложений в Marketplace уже перешагнуло отметку в 25 тысяч, и совсем не удивительно что среди них стали появляться и бенчмарки.

WP Bench

Видео выше демонстрирует функционал бенчмарка под расслабляющую музыку. Данное приложение является наиболее полнофункциональным для платформы WP 7. В набор тестов входят тесты для CPU (одно- и многопоточность), для GPU, памяти и дисплея, и даже для батареи устройства.

Benchmark Free

Не многое можно сказать об этом бенчмарке, который очень схож по результатам с WP Bench. Хотя различия имеются: Benchmark Free делает акцент на производительности CPU вашего устройства, расчетах, а также на работе с памятью устройства. Данный бенчмарк появился в конце мая этого года, и будет активно развиваться.

Particle System

Этот бенчмарк является едва ли не единственным под эту платформу в App Catalog, и его основной целью является измерение производительности и возможностей для отображения HTML5 на устройствах с WebOS. Сам тест состоит из манипуляций над частицами, что позволяет просчитать количество кадров при отрисовке контента в браузере.

Ни один из ранее упоминавшийся тестов не является по-настоящему универсальным, некоторые из них являются кросс-платформенными, и нет ни одного доступного на всех платформах. Едлинственным способом преодолеть это ограничение – найти что-то, что объединяет все платформы для мобильных устройств между собой. Этим является работа с JavaScript в браузерах устройств. И самым популярным бенчмарком для измерения производительности JavaScript является Sunspider.

Sunspider
Созданный той же командой разработчиков, что и браузерный движок WebKit (который используется в iOS и Android), Sunspider симулирует реальное использование JavaScript на разных сайтах. Сюда входят тесты на генерацию облака тегов, тесты шифрования и декомпрессии. Результат представляется в ввиде миллисекунд, и чем он ниже – тем лучше. Если в вашем браузере отключена поддержка JavaScript – то тест работать не будет. Уточнить можно в настройках браузера.

Бенчмарки не являются верным способом выбора подходящего вам устройства, и также не являются способом объявления какого-либо устройства лучшим. Вместо этого, используя стандарты при измерении производительности, они дают нам возможность предсказать поведение устройств при использовании в реальной жизни. В то время как никакой бенчмарк не даст нам 100% гарантированного результата касательно производительности компьютера или смартфона, они могут помочь сравнить несколько устройств, насколько хорошо эти устроства могут решать одинаковую для них задачу. Поэтому давайте не будем воспринимать бенчмарки с излишней строгостью и будем относится к ним как к очередному инструменту, кирпичику, который поможет нам составить мнение о продукте.

Первый бенчмарк появился, как можно догадаться, не на смартфоне. Изначально подобную программу устанавливали только владельцы компьютеров. Производительность тестировалась посредством 3Dmark и некоторых других приложений. Лишь много позже разработчики стали создавать бенчмарки специально для мобильных операционных систем. Сейчас существует достаточно большое количество таких утилит, в чём вы можете убедиться, прочитав материал о лучших бенчмарках для Android .

Любой современный смартфон состоит из множества компонентов. Одни обеспечивают какой-то определенный функционал. Например, сканер отпечатков пальцев улучшает безопасность, не позволяя разблокировать ваше устройство другим людям. Ну а аудиопроцессор улучшает звучание музыки, когда вы подключаете высококачественную гарнитуру. Другие компоненты влияют на производительность девайса. В частности, это касается процессора, оперативной памяти и некоторых других комплектующих. Мощность именно таких компонентов измеряет бенчмарк для смартфонов.

Пример результата тестирования Samsung Galaxy A5 2016

Подобное приложение проводит разнообразные тесты. Каждый из них заточен под определенные возможности комплектующих. Например, Антуту, если упрощать, проводит тестирование в три этапа:

• Приложение начинает свою работу с непрерывного потока данных, проверяя тем самым производительность оперативной памяти;
• Затем программа заполняет экран множеством двухмерных фигур - так проверяется то, как установленный процессор справляется с обработкой 2D-графики;
• В конце же AnTuTu Benchmark выводит на экран последовательность трехмерных изображений, тем самым проверяя работоспособность графического ускорителя.

Мы неспроста в качестве примера назвали AnTuTu . Сейчас это приложение считается золотым стандартом в мире мобильных бенчмарков - именно на его данные ориентируются многие пользователи и производители смартфонов.

Разнообразие комплектующих

Многие люди считают, что мобильные устройства наделяются одинаковыми комплектующими. Отличается, например, лишь объем оперативной памяти. Или же, например, тактовая частота процессора. Но на самом деле все эти компоненты производятся разными компаниями, в связи с чем их характеристики могут быть совершенно разными. Из-за этого производительность устройств сильно отличается.

Оперативная память. Конечно, наиболее важным её параметром является объем. Но отличается у памяти и пропускная способность. Этот параметр не пишут в характеристиках устройства. Выяснить, насколько высокой скоростью обладает память, можно только посредством запуска бенчмарка.

Скоростная оперативная память быстрее вбирает в себя информацию, быстрее она затем и считывается. В результате приложения грузятся быстро, как и сама операционная система. Если же оперативная память медленная, то вы обязательно будете сталкиваться с подтормаживаниями Android.

Процессор. Это самый технически сложный компонент. В первую очередь люди обращают внимание на количество ядер, из которых он состоит, и тактовую частоту. Но на самом деле суммарная мощность зависит и от технологии изготовления, и от многих других факторов. А ещё именно от процессора зависит наличие поддержки тех или иных технологий, касающихся сетей четвертого поколения. К слову говоря, именно на показания бенчмарков мы ориентировались при создании рейтинга самых мощных процессоров .

Постоянная память. От её объёма производительность практически никак не зависит. Но такой тип памяти тоже обладает той или иной скоростью записи и чтения. От этого тоже зависит то, как быстро операционная система получит доступ к тем или иным данным.

Остальные комплектующие. Они на результаты смартфонов почти никак не влияют. Однако при помощи бенчмарка вы всё же сможете хотя бы ради интереса узнать, из каких компонентов состоит ваш телефон. Например, так вы выясните, имеет ли аппарат гироскоп . Если такой датчик отсутствует, то нет никакого смысла покупать VR-шлем. Расскажет бенчмарк и о беспроводных модулях, и об экране (за исключением его диагонали), и о многом другом.

Доверяй, но проверяй

Все бенчмарки позволяют лишь примерно сравнивать один смартфон с другим. Дело в том, что иногда тест производительности совершенно ни о чём не говорит. Некоторые производители адаптируют «железо» таким образом, чтобы оно выдавало великолепные результаты в AnTuTu и других бенчмарках. Но в реальной жизни такой аппарат может вести себя крайне неадекватно. Вот почему перед покупкой смартфона следует почитать обзоры на него, не ориентируясь только на цифры, показанные в бенчмарке.

Разнообразие бенчмарков в Google Play

Также следует заметить, что тест производительности выжимает из устройства все соки. В обычной жизни девайс не будет повышать тактовую частоту процессора до экстремальных значений, ведь это приведёт к молниеносной разрядке аккумулятора. Да и на оперативную память чаще всего накладываются определенные ограничения. Это ещё одна причина более медленной работы устройства вне его тестирования бенчмарком.

Где посмотреть результаты?

Скачать любой бенчмарк можно в Google Play или AppStore . После тестирования вы увидите табличку с результатами вашего смартфона. Также вы сможете узнать, какие устройства показали чуть более лучший и худший результат. В некоторых приложениях реализована система авторизации. В таком случае сервис будет хранить информацию о всех смартфонах и планшетах, которые были вами протестированы.

Если говорить именно об AnTuTu, то у этого бенчмарка есть собственный официальный сайт. На нём вы найдете актуальный рейтинг смартфонов , обновляющийся каждый месяц. Например, по итогам марта 2017 года самым мощным аппаратом является iPhone 7 Plus . При этом в плане 3D-графики его чуть-чуть обходят OnePlus 3T , LeEco Le Pro 3 и Moto Z .

Бенчмарк, что по-английски означает «ориентир, эталон», это показатель, используемый в финансовой индустрии для оценки текущего состояния рынка или его сегмента для анализа эффективности управления инвестиционного фонда. Бенчмарк служит базой для расчёта ряда аналитических коэффициентов. Наиболее часто встречающаяся форма бенчмарка это - индекс фондового рынка или какого-либо из его сегментов. Восстановление фондовых рынков сопровождается ростом. Однако не все рынки и финансовые инструменты растут одинаково динамично. Учитывая, что многих инвесторов интересуют высокие доходности, они ищут те инструменты и рынки, которые растут сильнее других. На помощь таким инвесторам приходят показатели, используемые для сравнения и оценки результатов, - бенчмарк.
Не смотря на разнообразие различных фондовых индикаторов в мире, которые рассчитываются разными специализированными агентствами и компаниями, известных и популярных можно пересчитать по пальцам. Как правило, для каждой страны выделяется один индекс, который инвесторы обычно называют «бенчмарк». США составляют исключение, где известность получили сразу три индикатора - индекс Доу-Джонс, SnP 500 и NASDAQ. В настоящее время в России выделяются два индекса, о которых стоит говорить как о странновых индикаторах, ими являются фондовые индексы РТС и ММВБ. Индекс РТС появился первым и долгое время оставался бенчмарком на российском рынке, однако конкурентная борьба между двумя ведущими игроками рынка привела к тому, что ликвидность по большинству «голубых фишек» перетекла от РТС к ММВБ. И она сейчас контролирует большую часть биржевого оборота акций российских компаний. Соответственно статус бенчмарка также перешёл индексу ММВБ. Большой популярностью среди иностранных инвесторов пользуется также индексы MSCI Russia и индексы, рассчитываемые агентством Standard & Poor"s.
Какие инструменты, помимо фондовых индексов, могут выступать в роли бенчмарка?
В более широком смысле, бенчмарком на рынке российских акций являются фондовые индексы США и иногда эксперты называют ключевым бенчмарком российского рынка цены на нефть. Отечественный рынок, как бы, ориентируется на их динамику. Кроме того, в отношении эмитентов, устойчивый, на протяжении определённого времени, уровень премий, дисконта или доходности по бумагам, со временем берётся за некий бенчмарк при определении недооценённости или переоценённости тех или иных ценных бумаг.
Как трактовать поведение того или иного показателя по отношению к бенчмарку?
Допустим, бенчмарк - это мировой рынок, и даже если по отношению к нему национальный фондовый рынок немного просел, то он всё равно считается стабильным. В расчёт берутся только существенные отклонения. Если национальные индексы просели больше чем бенчмарк, обычно говорят о «перепроданности» и «недооценённости» рынка. Если же рынок рос существенно опережающими бенчмарк темпами, говорят о его «перекупленности» и «переоценённости». Обычно российский рынок в этом разрезе сравнивают с другими рынками группы развивающихся стран. В целом бенчмарк может быть определён в виде, как рыночного индекса, так и отдельных финансовых инструментов.
Где можно найти практическое применение ориентирам доходности?
В настоящее время широкую популярность получили индексные фонды - ПИФ. Индекс, который принят за основу портфеля подобного фонда и будет являться для него бенчмарком.
Как происходит выбор того или иного индекса в качестве бенчмарка для индексного фонда?
В качествен бенчмарка того или иного ПИФа выбирается индекс наиболее подходящий по структуре и соответствующий выбранной инвестиционной стратегии фонда. В случае, когда подходящего индекса не существует или когда существующий общедоступный публичный индекс не соответствуют требованиям, предъявляемым к ПИФам - компания самостоятельно рассчитывает соответствующий индекс-бенчмарк. Инвестиционный портфель ПИФа не копирует бенчмарк, а, скорее, служит ориентиром и отправной точкой для формирования портфеля этого ПИФа. Исключением являются лишь индексные фонды, которые по определению стремятся воссоздать структуру индекса и показать доходность максимально близкую доходности соответствующего индекса.
Ориентир доходности - бенчмарк, имеет не только информативное значение, но и приносит практическую пользу инвесторам, стоящим перед выбором финансовых инструментов для вложения средств. Для того, чтобы определить интересен ли тот или иной финансовый инструмент, с точки зрения доходности, инвестору достаточно посмотреть на его динамику, относительно выбранного бенчмарка, который найдётся на любом рынке, в каждом секторе и для каждого финансового инструмента.

Старая пословица говорит, что все познается в сравнении. Легко сравнить визуально две вещи, чтобы определить, какая красивее. Так же легко взять их в руки, чтобы понять, какая удобнее. Удобны для сопоставления величины из осязаемого мира, такие как масса, скорость, цена, расстояние, мощность. А вот с электронной техникой все сложнее. Ее характеристики выражают в значениях из привычного нам физического мира (число транзисторов, количество ядер, их частота, объемы памяти), но напрямую на возможности конкретного устройства эти цифры не указывают. Для того, чтобы оценить их – были придуманы бенчмарки.

Бенчмарк – это специальная тестовая программа, которая имитирует задачи, которые электронике приходится выполнять в реальности, оценивает качество и скорость их выполнения, и по итогам теста присваивает баллы. Сравнивая эти баллы, можно сопоставить и сравнить два устройства, определить, какое лучше. Предметом оценки могут быть практическая скорость вычислений центрального (ЦП) или графического (ГП) процессора в различных задачах, уровень автономности, быстродействие памяти, или же комплексная оценка совокупности параметров.

Бенчмарки для оценки производительности процессора нагружают ядра ЦП чисто теоретической вычислительной задачей (например, решением систем линейных уравнений), или же симулируют практические сценарии (например, обработку веб-страниц). По итогам оценки скорости решения задач присваиваются очки. В первом случае это обычно абсолютные показатели ФЛОПС (количество вычислений с плавающей запятой в секунду). Во втором используются более абстрактные значения (прозванные в народе попугаями – по аналогии с мультфильмом, в которому длину удава измеряли попугаем), такие как количество обработанных за тестовый промежуток страниц, объем заархивированных данных, перекодированного аудио или видео, и т.д.

Популярным тестом процессора для смартфонов является GeekBench. Этот бенчмарк оценивает скорость шифрования данных, архивации, обработки изображений, запросов SQL, HTML-кода, рендеринга различных документов, а также скорость работы памяти и ее контроллера. На основании суммарной оценки присваивается итоговый балл. Особенностью теста является его кроссплатформенность и практическая ориентированность (работа не с абстрактными уравнениями, а реальными сценариями). В GeekBench можно сравнить между собой результаты смартфона на ARM процессоре Qualcomm, MTK или Apple, x86-64 ПК на базе AMD или планшета на Intel Atom, и сравнение можно считать объективным.

Бенчмарки для оценки производительности ГП

Оценка быстродействия процессора – это хорошо, но узнать возможности графики интересно большему числу людей. Ведь с веб-серфингом сейчас справляется и четверка ядер Cortex A53 в бюджетном китайце, а вот самым тяжелым видом программ являются игры. Для теста производительности графики бенчмарк запускает ренедеринг определенной трехмерной сцены, имитирующей игровую ситуацию. По итогам теста за производительность ГП присваиваются абстрактные баллы, или же выводится суммарный FPS (количество кадров в секунду) за определенный промежуток времени. Чем больше кадров смог обработать ГП – тем больше баллов присвоит ему бенчмарк.

Пример бенчмарка, осуществляющего тест скорости графики – 3DMark. Мобильная версия этой программы отличается от компьютерной своей спецификой, но для оценки ГП и сравнения разных смартфонов он подходит. Бенчмарк осуществляет тестирование производительности графики в режимах OpenGL, версий 2.0-3.1. Еще один тест графики – GFXBench. Он оценивает быстродействие графического процессора смартфона методом рендеринга набора трехмерных роликов, имитирующих различные виды игр (гонки, стрелялки и т.д.).

Бенчмарки для теста автономности

Значение емкости батареи, измеренное в мАч или Втч, не дает представления о практической автономности устройства. Сравнивать разные смартфоны по живучести позволяют бенчмарки для теста батареи. Эти программы создают нагрузку на батарею, имитируя реальные сценарии, такие как проигрывание видео и музыки, обработку веб-страниц, офисных документов, игровую и вычислительную нагрузку процессора.

Результат тестирования батареи выражается или в абстрактных баллах, или в часах и минутах. По первому принципу работает тест AnTuTu Battery Test. Он нагружает смартфон различными задачами и определяет, за какой промежуток батарея разрядится на N процентов. Чем он больше – тем выше и баллы. PCMark Battery Test выдает результат не в баллах, а указывает время, которое смартфон способен проработать при определенном сценарии нагрузок смешанного типа, нагружающих смартфон.

Комплексные бенчмарки

Комплексные бенчмарки – наиболее популярная разновидность тестов для смартфонов. Эти программы оценивают вычислительную мощность ЦП и ГП, скорость оперативной и постоянной памяти, общее быстродействие в определенных задачах. По итогам тестирования смартфону присваиваются баллы, их расчет каждая программа осуществляет по своему алгоритму.

Самый популярный комплексный бенчмарк, AnTuTu, суммирует очки, которые набрал в тестах графики, процессора и общей производительности. Он производит отрисовку двух 3D-роликов для оценки графики, нагружает ЦП математическими, общими задачами, а также проводит многоядерный тест. По общей производительности баллы присваиваются за результаты обработки шифрования, кодирования данных, обработку изображений, и других сценариев. Результат AnTuTu – это суммарный балл по всем тестам.

Схожие принципы использует другой комплексный бечмарк, Quadrant. В нем баллы тоже суммируются по итогам тестов разных частей аппаратного обеспечения. То же самое можно сказать про Basemark, Vellamo и другие, менее популярные программы для тестирования смартфона.