International Organization for Standardization (ISO)
Последняя версия
ISO/IEC 14756:1999
сфера применения
Настоящий международный стандарт определяет, как можно измерить и оценить ориентированную на пользователя производительность компьютерных программных систем (CBSS). CBSS — это система обработки данных, какой ее видят ее пользователи, например, пользователи различных терминалов, или как ее видят оперативные пользователи и бизнес-пользователи в центре обработки данных. CBSS включает в себя аппаратное обеспечение и все его программное обеспечение (системное программное обеспечение и прикладное программное обеспечение), которое необходимо для реализации функций обработки данных, требуемых пользователями, или того, что может влиять на временное поведение CBSS. Настоящий международный стандарт применим для испытаний всех систем или частей систем, ограниченных по времени. Также сеть может быть частью системы или основным объектом испытаний. Метод, определенный в этом международном стандарте, не ограничивается особыми случаями, такими как классические пакетные системы или системы терминального хоста, например, также включены системы клиент-сервер или, в более широком понимании определения «задачи», системы реального времени. Но осуществимость тестов может быть ограничена затратами, необходимыми для тестирования больших сред. Настоящий международный стандарт определяет ключевые показатели показателей производительности, ориентированных на пользователя, и определяет метод измерения и оценки этих показателей эффективности. Указанные значения производительности – это те, которые описывают скорость выполнения пользовательских заказов (заданий), а именно тройку:
——времени выполнения, - пропускной способности, - своевременности. Заказы пользователя, называемые в дальнейшем задачами, могут иметь простую или сложную внутреннюю структуру. Задача может быть заданием, транзакцией, процессом или более сложной структурой, но с определенным началом и окончанием в зависимости от потребностей оценщика. При оценке производительности можно использовать настоящий международный стандарт для измерения временных характеристик со ссылкой на время завершения бизнес-транзакций в дополнение к другим индивидуальным временам ответа. Оценка производится с учетом требований пользователей или путем сравнения двух или более измеряемых систем (типов или версий). Намеренно не приводятся предложения по измерению внутренних значений, таких как:
——значения использования, - средняя скорость выполнения инструкций, - длины путей, - частота попаданий в кэш, - время ожидания в очереди, - время обслуживания, поскольку определение внутренних значений зависит от архитектуры. аппаратного и программного обеспечения тестируемой системы. В отличие от этого, значения производительности, ориентированные на пользователя, определенные в настоящем стандарте, не зависят от архитектуры. Определение внутренних значений производительности может быть выполнено независимо от определения значений производительности, ориентированных на пользователя. Их можно использовать и измерять в дополнение к значениям производительности, ориентированным на пользователя. Кроме того, определение терминов эффективности, с которой создаются значения, ориентированные на пользователя, может быть сделано свободно. Кроме того, этот международный стандарт дает руководство о том, как обеспечить в системе обработки данных стабильное и воспроизводимое рабочее состояние. Это воспроизводимое состояние можно использовать для измерения других значений производительности, таких как вышеупомянутые внутренние значения. Настоящий международный стандарт фокусируется на:
——прикладном программном обеспечении;
——программное обеспечение;
——системы «под ключ» (¡.т.е. системы, состоящие из прикладного программного обеспечения, системного программного обеспечения и - общих систем обработки данных. аппаратных средств, для которых оно было разработано); Настоящий международный стандарт определяет требования к эмуляции (с помощью технической системы - так называемого эмулятора удаленного терминала (RTE) - взаимодействия пользователя с системой обработки данных. Это руководство для точного измерения и оценки показателей производительности, ориентированных на пользователя. Он предоставляет руководство для оценки этих значений с необходимой точностью и повторяемостью CBSS с детерминированным, а также случайным поведением пользователей.Это также руководство по внедрению RTE или проверке того, работает ли он в соответствии с настоящим Международным стандартом.
ISO/IEC 14756:1999 История
1999ISO/IEC 14756:1999 Информационные технологии. Измерение и оценка производительности компьютерных программных систем.