相互運用性テストで手動又は自動化を選択する場合

Nextgen | 2020年12月23日 | ブログ投稿

“The reports of my death are greatly exaggerated.”

自動化された相互運用性テストはペースを上げて進んでいますが、手動テストは、さまざまなテストシナリオでその位置と価値を頑固に維持しています。

しかし、IoTコネクテッドデバイスの急増に伴い(McKinseyは、2023年までに430億個になると推定)、手動テストはこれまでと同様に持続するのでしょうか?

消費者需要の高まりに支えられた製品開発ペースの早まりは、QA部門での製品検証に対する大きな圧力が圧し掛かっています。このような状況は、前例のない、様々な製品やユースケースを持っており、より強力なテストを通じた検証手順が必要です。

それでは、コネクテッド製品とユースケースの多様性により、手動テストを一掃できるのでしょうか? それとも、人間の関与が技術の進歩により、まだ実現されていない利益をまだ提供できるでしょうか?

manual-or-automated-interoperability-testing

手動テストの主な利点は何でしょうか?

新しいテクノロジーの絶え間ない進歩にもかかわらず、手動テストはQA部門のツールキットの重要な部分であり続けています。理由は次の5つです。

  1. 手動テストにより、予期しない結果をすばやく調査できます。 一般に発生する状況ではないことをお探しですか?QAテスターは、問題をすぐに理解して、潜在的な解決策を悩みながら、迅速に探索することができます。
  2. 手動テストにより、ユーザー体験の問題をより適切に認識できます。 人間はUXテスト(ユーザー体験)質問をよくすることができます。例えば、ディスプレイの背景色が正しくないように出力ば、人間はすぐに気付くことができますが、自動化テストで識別することは困難です。
  3. 手動テストは、ビルトインユーザーインターフェイスを使用して迅速に実行できます。 最終消費者レベルのインターフェイスを使用して、サードパーティ製品と他の製品との接続をテストする場合に、人間はすばやくテストすることができます。
  4. 手動テストにより、フィールドの問題を簡単に再現できます。 簡単に再現されているフィールドの問題が報告されている場合、解決のための最も効果的で費用対効果の高い方法は、多くの場合、問題の再現を目指している手動テストを実行することです。
  5. 手動テストは、動的動作を処理するのに適しています。 テスト手順が一定でない場合(Xが発生するかYが発生するか不明な場合)、人間はそれを非常にうまく処理できます。自動化は進行過程を明確にする必要があります。

自動化テストの主な利点は何ですか?

自動化テストを使用する理由として、7つの主な問題があります。

  1. 自動化により、テストあたりのコストが削減できます。 手動テストの場合は、テストが増えるほど、コストが直線的に増加します。手動テストが増加されるようになると、人間の限られた能力は、最終的には過剰になって追加料金が必要ですが、自動化では関係がありません。
  2. 自動化により、人件費を大幅に節約できます。 テストエンジニアは給与水準が高く、ソフトウェア エンジニアは最も高いレベルの給与を支払いが必要です。
  3. 自動化により地理的な制限が無くすことができます。 距離が離れていても、統合されたチームを維持し、他の地域で実施したテストであっても一貫性のあるテスト方法を確保することができます。
  4. 自動化により、テストの一貫性と深度に対する確信を提供します。 テスト手順や報告で人的エラーをなくすことができます。テスト方法論は常に同じです。
  5. 自動化により、24時間年中無休のテストサイクルが提供します。 自動化は人間の投入が不要なため、スタッフの勤務時間やシフトパターンを気にする必要がありません。
  6. 自動化により、より広範なテストシナリオを完了できます。 多くのエンジニアを必要としないため、より効果的なコストでより複雑なテストを処理できます。
  7. 自動化により、詳細なログ記録とバグの責任所在を提供できます。 問題の所在を正確に把握し、部品サプライヤがデバイスの問題を解決を迅速に推進できます。

手動テストに最適な状況はどれですか?

手動テストには、明確に定義された特定の状況下で明らかな利点を持っています。

人間は適応力に優れているため、自動化テスト手順よりも手動テストを迅速に展開できます。特に、短いテストサイクルでは、自動化テストのセットアップに要する時間よりも短時間で手動テストをセットアップし、実行、分析できる明らかな利点があります。

手動テストは、テストチームがソフトウェアの更新により、以前特定された問題が解決されたかどうかを確認する場合に最適です。

最後に、手動テストは、初期の製品プロトタイプをテストするための最も論理的な方法です。 特に、製品開発サイクルの初期においては、製品が公式発表前になる前に、多くの変更がされる可能性があるため、自動かテストを使用する価値がほとんどないことがあります。

自動化テストに最適な状況はどれですか?

自動化テストは、いくつかのシナリオの中で最も合理的な選択です。

回帰テストでは、自動化が手動テストよりも確実に良いと言える領域の一つです。新しいソフトウェアビルドを持って同じテストを繰り返す必要があり、または特に複雑な製品の場合に自動化回帰テストは、各機能が正常に動作していること、あるいは問題があることを確認するのに役立ちます。

自動化テストは、市場投入までの時間を短縮するための鍵でもあります。手動テストよりも迅速に、より多くのバグを見つけることができます。そして、それは継続的インテグレーションと開発(CI/CD)プロセスの不可欠なコンポーネントです。

もし開発チームに直接報告が重要な場合、自動テストは手動テスターができる領域を超えて、テストの詳細と深度を提供しています。

最後に、ブランドの評判を脅かす可能性のある重要なOTA更新をテストするにも理想的なソリューションです。

手動テストと自動化テストの組合せはいつが最適ですか?

ハイブリッドテストは、両方の利点を使用するアプローチとして、ますます一般的になっています。手動テストを支持する懐疑論者でさえ、人と機械を混合することの利点を理解できます。

一部のシナリオは100%自動化できないため、人間の介入が不可欠です。また、人工知能(AI)と機械学習が進歩しても、データモデルを操作します。多くの場合、テスト要件とプロセスが学習された後、自動化に移行する前に、手動テストが構築されます。

ハイブリッドテストは、特定の手順を自動化するのが難しい場合でも、特に効果的です。この場合、自動化テストでできるすべてのテストをまず実行し、テストプロセスが終了した時点で、テストエンジニアが必要な手動テストを実行します。

ハイブリッドテストを通じて投資回収がより迅速に行われることがあります。 (長期的に可能な最良のROIが必ずしも得られない場合でも)。

自動化テストは増え続けています

テストプロセスの自動化の難しさ、予測可能で再利用可能なテスト環境の開発、熟練したテスト自動化オペレーターの不足など、さまざまな課題があるため、テストアクティビティの自動化は20%未満のままとなっています。 Capgeminiによれば、これは現在、「企業での成熟したテスト」の最大のボトルネックとなっています。

ただし、自動化テストがその可能性を活用できる企業に大きな利点を提供することは疑いの余地がありません。

自動化テストの統合は、困難な市場で競争優位性を確保し強化するための重要なステップです。 AIの導入は、今後数年間、自動化をより容易にかつ効果的に推進するでしょう。したがって、自動化テストへの投資は相当大きな利益を得ることができる、長期的な決定です。

素早い合理的な意思決定だけが、御社の発展をもたらすことができるでしょう。

Share this post on:

Share on facebook

Share on linkedin

Share on twitter