• Examples of experiment design for analysis, simulation, and measurement
  分析、シミュレーションと測定のための実験計画の例
  • Common Mistakes in Performance Evaluation
    下院は性能評価で間違える
  • A Systematic Approach to Performance Evaluation
    性能評価へのシステム的アプローチ
  • Experiment Design Examples
    実験計画例
  • References
    リファレンス

Examples of experiment design for analysis, simulation, and measurement
実験計画の例は分析、シミュレーションと測定のために

[Japanese]
[日本語]

This page contains several experimet design examples for analysis, simulation, and measurement according to the guideline given in [Jain91]. For all performance analysit, I strongly recommend to carefully read [Jain91]. The following guidelines are excerpt from [Jain91].
このページは、分析、シミュレーション、のためのいくつかのexperimet計画例と[Jain91]提出されたガイドラインによる測定を含む。性能analysitにもかかわらず、私は、[Jain91]注意深く読むために強く推薦する。以下のガイドラインは、[Jain91]からの抜粋だ。

Common Mistakes in Performance Evaluation
共通の間違いは性能評価にある

1. No Goals
1. 目標なし

2. Biased Goals
2. 一方に片寄らせられた目標

3. Unsystematic Approach
3. 非組織的なアプローチ

4. Analysis without Understanding the Problem
4. 問題を理解することのない分析

5. Incorrect Performance Metrics
5. 不正確な性能メトリック

6. Unrepresentative Workload
6. 選挙民を代表していないワークロード

7. Wrong Evaluation Technique
7. 誤っている評価テクニック

8. Overlooking Important Parameters
8. 見落としている重要なパラメーター

9. Ignoring Significant Factors
9. 無視している重要な要因

10. Inappropriate Experimental Design
10. 不適切な実験的な計画

11. Inappropriate Level of Detail
11. 不適切なレベルの細部

12. No analysis
12. 分析なし

13. Errorneous Analysis
13. Errorneous分析

14. No Sensitivity Analysis
14. 感性分析なし

15. Ignoring Errors
15. 無視している誤り

16. Improper Treatment of Outliers
16. 通いの従業員の穏当でない扱い

17. Assuming No Change in the Future
17. 将来いかなる変化も想定しないこと

18. Ignoring Variability
18. 無視している変化性

19. Too Complex Analysis
19. とても複雑な分析

20. Improper Presentation of Results
20. 結果の穏当でないプレゼンテーション

21. Ignoring Social Aspects
21. 無視している社会の側面

22. Omitting Assumptions
22. 省いている仮説

A Systematic Approach to Performance Evaluation
システム的アプローチは性能評価に

1. State Goals and Define the System
1. 目標を述べて、そしてシステムを定義せよ

2. List Services and Outcomes
2. リスト・サービスと結果

3. Select Metrics
3. 上等のメトリック

4. List Parameters
4. リスト・パラメーター

5. Select Factors to Study
5. 勉強する上等の要因

6. Select Evaluation Technique
6. 上等の評価テクニック

7. Select Workload
7. 上等のワークロード

8. Design Experiments
8. 計画実験

9. Analyze and Interpret Data
9. データを分析して解釈せよ

10. Present Results
10. 現在の結果

Experiment Design Examples
実験計画例

According to the above guideline, "A Systematic Approach to Performance Evaluation", I have designed several REAL experiments in my research work. Performace analysis results based on these experiment designs will be soon available at my publication page.
上記のガイドラインによると,「パフォーマンス評価へのシステム的アプローチ」、私は、私の研究仕事でいくつかの本当の実験をデザインした。実験が設計をするというこれらに基づくPerformace分析結果は、すぐに私の発表ページで入手できるだろう。

• On Dynamic Parallelism Adjustment Mechanism for Data Transfer Protocol GridFTP (2005/03/30)
  データ転送プロトコルGridFTP(2005/03/30)のための動的な平行調整機構で

  http://www.lsnl.jp/~ohsaki/research/experiment-design/gridftp-oosaki-050330.ppt http://www.lsnl.jp/~ohsaki/research/experiment-design/gridftp-oosaki-050330.pdf
  http://www.lsnl.jp/~ohsaki/research/experiment-design/gridftp-oosaki-050330.ppt http://www.lsnl.jp/~ohsaki/research/experiment-design/gridftp-oosaki-050330.pdf

• Modeling and Performance Evaluation of DRED (Dynamic Random Early Detection) using Fluid-Flow Approximation (2004/11/26)
  流体近似法(2004/11/26)を利用したDRED(動的な無作為の早期発見)のモデル化とパフォーマンスの評価

  http://www.lsnl.jp/~ohsaki/research/experiment-design/dred-oosaki-041126.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/dred-oosaki-041126.ppt
  http://www.lsnl.jp/~ohsaki/research/experiment-design/dred-oosaki-041126.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/dred-oosaki-041126.ppt

• Design and Performance Evaluation of Scalable Peer-to-Peer Virtual Private Network (P2P-VPN) (2004/09/30)
  スケーラブルなピア・ツー・ピア仮想プライベートネットワーク(P2P-VPN)(2004/09/30)の計画とパフォーマンスの評価

  http://www.lsnl.jp/~ohsaki/research/experiment-design/p2pvpn-oosaki-040930.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/p2pvpn-oosaki-040930.ppt
  http://www.lsnl.jp/~ohsaki/research/experiment-design/p2pvpn-oosaki-040930.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/p2pvpn-oosaki-040930.ppt

• Enabling Large Scale Network Simulation with 100 Million Nodes using Grid Infrastructure (2004/09/29)
  Gridインフラストラクチャ(2004/09/29)を利用した1億のノードとの使用可能化大規模ネットワーク・シミュレーション

  http://www.lsnl.jp/~ohsaki/research/experiment-design/gridsim-oosaki-040929.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/gridsim-oosaki-040929.ppt
  http://www.lsnl.jp/~ohsaki/research/experiment-design/gridsim-oosaki-040929.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/gridsim-oosaki-040929.ppt

• On Scalable Edge-based Flow Control Mechanism for VPN Tunnels --- Part 2: Scalability and Implementation Issues (2004/09/13)
  端を基礎とされたスケーラブルなフロー制御で、VPNのためのメカニズムはトンネルを掘る--- パート2:スケーラビリティと実装の問題(2004/09/13)

  http://www.lsnl.jp/~ohsaki/research/experiment-design/i2vfc-oosaki-040913.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/i2vfc-oosaki-040913.ppt
  http://www.lsnl.jp/~ohsaki/research/experiment-design/i2vfc-oosaki-040913.pdf http://www.lsnl.jp/~ohsaki/research/experiment-design/i2vfc-oosaki-040913.ppt

References
リファレンス

• [Jain91] R. Jain, "The art of computer systems performance analysis --- techniques for experimental design, measurement, simulation, and modeling," John Wiley & Sons, Inc., 1991.
  [Jain91]R。ジャイナ教徒であって"コンピュータシステム性能分析の芸術---実験的な計画のためのテクニック、測定、シミュレーションとモデル化"、ジョン・ワイリ＆子孫、合弁会社、1991。