カテゴリー: 勉強会開催報告

  • 【開催レポート】 NaITE#20 「プロセスモデル CMMI にまつわるちょっと深イイ話」 開催レポート

     

    スポンサーリンク

    1 開催概要

    2017年4月8日 NaITE#20「プロセスモデル CMMI にまつわるちょっと深イイ話」を開催しました。

    当日は盛況に開催することができました。また,活発な議論や交流が行なわれ,有効な場とすることができました。

    開催概要やプログラムの各セッションについてのレポートをお届けいたします!

    ご参考になれば幸いです。

     

    pdf:NaITE#20 「プロセスモデル CMMI にまつわるちょっと深イイ話」 開催レポート

     

    2    参考情報・リンク等

    当日の発表資料等は以下をご参照下さい。

    • OP資料

     

    • CMMIに振り回されないために知っておきたい事

     

    • CMMIとSEPGとアタシ

     

    3 次回の予定等

    次回は5月20日(土)「バグ票活用ガイド 勉強会(仮)」と題して,川崎駅周辺にて開催予定です。

    以上

    ーーーーーーーーーー
    2017年4月26日 作成
    報告者:岡野麻子、すずきしょうご(NaITE運営スタッフ)

    pdf:NaITE#20 「プロセスモデル CMMI にまつわるちょっと深イイ話」 開催レポート

  • 【開催レポート】 NaITE#19 「数学を学ぼう ~数学の知識を利用したソフトウェアテスト~」 開催レポート

    スポンサーリンク

    1 開催概要

    2017年1月21日 NaITE#19「数学を学ぼう ~数学の知識を利用したソフトウェアテスト~」を開催しました。

    概要は次の通りです。

    開催日時 2017/1/21(土)

    14:00 〜 16:10

    開催場所 ミューザ川崎シンフォニーホール(第3会議室) (JR 川崎駅 徒歩2分)
    メインテーマ 数学を学ぼう ~数学の知識を利用したソフトウェアテスト~
    キーワード・タグ 数学 ソフトウェアテスト
    プログラム 14:00~14:10 オープニング「開会のご挨拶」 NaITE運営スタッフ
    14:10〜15:20 セッション「数学入門〜数式とソフトウェアテスト〜」 岡野 麻子 氏
    15:30〜16:00 セッション「数学をツールとして使ってみる 〜ディスカッション〜」 参加者
    16:00〜16:10 クロージング NaITE運営スタッフ

    2 勉強会の様子

    今回は「数学を学ぼう ~数学の知識を利用したソフトウェアテスト~」というタイトルで勉強会を行いました。

    今回は「探針テスト」を題材に、ソフトウェアテストに利用されている数学知識とその知識利用の背景を理解することを目的として開催されました。岡野氏より、統計数学の基礎知識から探針テストの中で使われている「区間推定」の考え方までを大まかに解説いただいた後、ソフトウェアテスト及び開発の現場でどのように数学の知識が応用されているか参加者を交えてディスカッションを行いました。

    数学と聞くと苦手意識を持ってしまう方も多い中、実際に手を動かして解答する演習問題もあり、丁寧な解説の中で理解を深められた様子でした。

    2.1 オープニング

    オープニングではNaITEスタッフから本イベントの注意事項、NaITEについての紹介、当日のプログラムについて説明をいたしました。その他現在活動中のSIG、活動を完了したSIGについての案内も実施いたしました。

    2.2 セッション「数学入門〜数式とソフトウェアテスト〜」

    岡野 麻子氏より、「数学入門〜数式とソフトウェアテスト〜」と題して統計数学の基礎と探針テストの概要、及びその中で用いられている背景知識について解説いただきました。

    奈良隆正氏の資料によると、探針テストとは製品検査に先立って、デバッグ・テスト段階における品質を検査担当部門が実際に測定・評価するものであるとし、基本的には検査項目をサンプリングし、その結果から全体の母不良率を求め残バグ件数を推定する方法であると説明されました。実際に探針テストを導入している現場では、探針テストの結果を不具合分析や品質向上の指針を与えるのに役立てているとのことでした。本勉強会では、たくさんのテストケースからランダムに選択したテストケースを実施するサンプリングテストの考え方を取り上げ、その中で用いられている統計的手法について学習すると説明されました。

    統計数学の基礎的な考え方として、初めに母集団と標本の関係について説明されました。母集団(対象とする全体)から一つの標本を抽出することはすなわち「母集団の正規分布に従う確率変数がという値をとること」に相当すると説明されました。標本から母集団を規定する母平均や母分散を推定することは、つまりサンプリングした標本の中で測定されたものから、テストケース全体を推定することを意味します。

     

    平均、分散、標準偏差については、それぞれ以下のような定義と説明されました。

    平均

    n 回試行した時の値の合計を試行回数で割ったもの。

    分散(標準偏差の二乗)

    確率変数  に対しては、

    恒等式  が成り立つため、変数の自由度は n から n-1 に減少する。

    したがって、分散は n-1 で割って

    となる。

    標準偏差

    平均からのズレのこと。分散を V として、

    と表される。

    なお、ここで標準偏差は得られたデータ(標本)のばらつきの度合いを示すのに対し、標準誤差は母集団の平均値の区間推定に用いられます。そのため、ここでは標準誤差の計算方法について説明されました。

    標準誤差

    ある実験で n 個のデータをとり、平均値  を計算する。引き続き同じ実験を N 回繰り返し、平均値  を算出する。

    同じ条件で実施しても、これらの平均値は  の周りにばらつく。このばらつきを示す指標が標準誤差である。

     

    標準誤差の計算方法について説明した後、探針テストで行う区間推定に必要な考え方として信頼区間、二項分布について説明されました。

    信頼区間

    信頼区間について、以下の式が成り立つ。

    信頼区間 = ±t × 標本標準誤差

    二項分布

    結果が成功か失敗のいずれかである n 回の独立した試行を行った時の成功率で表される離散確率分布である。サンプリングテストにおいては、サンプリングしたテストケース一つ一つについて「バグが出る」「バグが出ない」という二通りの結果を想定した独立したテストを実施するという意味となる。

    • 期待値

     

    • 分散

     

    • 標準誤差

     

     

    上記を用いて

    • 標準誤差

     

     

    となる。

    ※  なお、ここで探針テストではサンプリング回数が1回であるため、期待値は p となっている。複数回サンプリングを実施する時は i をかけることとなる。

     

    その後、二項分布及び信頼区間の考え方を用いて、探針テストにおける上限値(上限不良率)の計算方法について解説されました。導出過程については当日の発表資料をご参照ください。

    参加者にとって、勉強会の時間内で数式の意味を完全に理解するのは難しかったようですが、勉強会後の懇親会でも統計数学に関する疑問点などを議論し合い、ソフトウェアテストに使われている数学を理解するための呼び水となる大変有意義なセッションとなりました。

    2.3 セッション「数学をツールとして使ってみる 〜ディスカッション〜」

    岡野氏より、「ソフトウェアテスト及び開発の現場で、どのような統計的手法が扱われているか?」という議題が提供され、参加者を交えてディスカッションを行いました。参加者からは様々な意見が寄せられ、開発規模や工数の見積もりをはじめテストの終了判断など、様々な箇所で利用されていることが改めて理解できました。

    また、本勉強会で扱った「探針テスト」についても議論されました。「探針テストはバグを見つけるために実施する手法ではなく、手法適用の初めに層別を行う部分やサンプリングを実施するところにこそ技術が集約されている」との意見が挙がりました。

    • まとめ

    本勉強会のまとめとして、統計は分布の種類やその利用される意図、背景を踏まえて基本を理解することで様々な分野に応用できること、期待値や平均、分散や区間推定を使いこなすことでメトリクスの評価に応用できると説明されました。特に探針テストの中では二項分布が用いられており、改めて二項分布の定義や背景についても学んでみるとよいとのことでした。

    最後に、「統計は使えばいいというものではない。必ず意味があって使われているため、その意図や背景をしっかり理解することが大切」ということで会を締めくくられました。この機会に統計数学について学習してみることで、普段利用しているツールや考え方がより深く理解できるのではないかと感じました。

    3 参考情報・リンク等

    当日の発表資料等は以下をご参照ください。

    • オープニング資料

    http://www.slideshare.net/asakoyanuki/na-ite-19op

    • 数学を学ぼう 〜数学の知識を利用したソフトウェアテスト

    http://www.slideshare.net/asakoyanuki/distribution-naite19

    4 次回の予定等

    次回は4月8日(土)「CMMI流深イイ話(仮)」と題して,川崎市周辺にて開催予定です。

    以上

    ーーーーーーーーーー
    2017年2月10日 作成
    報告者:藤沢 耕助(NaITE運営スタッフ)

    pdf:NaITE#19 「数学を学ぼう ~数学の知識を利用したソフトウェアテスト~」 開催レポート

  • 【開催レポート】 NaITE#18 「ISO/IEC DIS 20246の説明 他」 開催レポート

    スポンサーリンク

    1 開催概要

    2016年11月12日 NaITE#18「ISO/IEC DIS 20246の説明 他」を開催しました。概要は次の通りです。

    開催日時 2016/11/12(土)

    14:00 〜 16:30

    開催場所 ワークプラザ勝田 研修室(3)(茨城県・勝田)
    メインテーマ ISO/IEC DIS 20246の説明他
    キーワード・タグ レビュー
    プログラム 14:00~14:10 オープニング「開会のご挨拶」 NaITE運営スタッフ
    14:10〜15:10 ISO/IEC DIS 20246 の(ごく簡単な)説明 すずき しょうご 氏
    15:20〜15:50 実装に近い工程における品質保証 藤沢 耕助 氏
    15:50~16:20 ディスカッション 参加者
    16:20〜16:30 クロージング NaITEスタッフ

    2 勉強会の様子

    今回は「ISO/IEC DIS 20246の説明他」というタイトルで勉強会を行いました。

    ISO/IEC DIS 20246とは,システム開発,テスト,保守,管理に関する作業成果物のレビューのための汎用フレームワークを示した国際規格案のことを指します。システム開発プロセスにおけるレビュー時に必要とする一般事項について記載されており,レビューに関する用語,プロセス,アクティビティやタスクなどがまとめられています。システムやソフトウェアに関わる全ての人が利用することができます。また,その他実装に近いレベルの品質保証に関するセッションと,それについての議論も行われました。

    参加者は少ないながらも,セッション後のディスカッションは活発に行われ,有意義な意見交換を行うことができました。

    2.1 オープニング

    オープニングではNaITEスタッフから本イベントの注意事項,NaITEについての紹介,当日のプログラムについて説明をいたしました。その他現在活動中のSIG,活動を完了したSIGについての案内も実施いたしました。

    2.2 セッション「ISO/IEC DIS 20246の(ごく簡単な)説明」

    NaITE#18_session1_01

    すずき しょうご 氏より,「ISO/IEC DIS 20246の(ごく簡単な)説明」と題してISO/IEC DIS 20246の概要を説明いただきました。また,レビューや評価などに関連する領域についても解説いただきました。

    ソフトウェアテストに関する共通認識として,ISO/IEC/IEEE 29119ファミリーとISTQBの二つのトレンドがあるとされました。ISO/IEC/IEEE 29119が動的テストを扱うのに対し,ISO/IEC 20246は静的テスト(レビュー)を扱うと解説されました。また,規格名に付いている”DIS”というのは”Draft International Standard”の略で国際規格の案であることを示し,今後内容等が変更される可能性があるとのことでした。

    ISO/IEC DIS 20246とは,システム開発,テスト,保守,管理に関する作業成果物のレビューのための汎用フレームワークを示した国際規格案です。ここでいう「レビュー」とは特定のプロセスとプロセス成果物を示すものではなく、システム開発プロセスすべてのプロセスとプロセス成果物を対象にします。また、レビューに関する用語の定義やプロセス,アクティビティなどレビュー時の一般的な事項について記載されており,システムやソフトウェアに関する全ての人が利用可能です。また,従来から広く知られているとレビューに関する規格IEEE 1028とのマッピングも,巻末のAnnexに記載されているそうです。

    ISO/IEC DIS 20246では作業成果物のレビューを扱いますが,ここでいう作業成果物とは、ソフトウェア開発工程のすべての成果物を指しています。

    • レビュープロセスとドキュメントの例

    NaITE#18_session1_02

    レビュープロセスと成果物ドキュメントについて,例を示して説明されました。レビューの計画からドキュメントの修正,報告に至る過程で,問題の記録,インシデントレポートの作成が行われます。

    レビューを考える上で必要なこと,レビューのタイプ,アクティビティとタスクについても解説されました。レビューの成功によって得られる成果には,欠陥や問題点の検出・識別,品質特性の評価など複数のものがあると説明されました。また,レビュー計画〜ドキュメントの修正・報告までの各アクティビティとタスクの詳細についても説明されました。

    その他,個人レビュー等で用いるレビュー技法についても説明されました。アドホックレビュー,チェックリストベースドレビュー,シナリオベースドレビューなどについて解説されました。また,レビューで考慮すべきステークホルダの視点を考えることも重要とされました。最後は、レビュープロセス自体のプロセス改善の必要性にも触れ,レビューにおけるメトリクスやツールによるサポートについて説明されました。

    レビューはソフトウェア開発における重要なプラクティスの一つです。ISO/IEC DIS 20246の公開をきっかけに,自分たちが行っているレビューについて今一度振り返ってみてはいかがでしょうか。

    2.3 セッション「実装に近い工程における品質保証」

    NaITE#18_session2_01

    藤沢 耕助 氏より,「実装に近い品質保証」と題して発表いただきました。

    実装レベルに近い品質保証について,実体験ベースでの発表が行われました。あるSIプロジェクトのシステムテストレベルのテストにおいて,単体テストレベルの欠陥が摘出されることに対して問題意識があるとしました。ここで,発表者の立場はプロジェクトのQAチーム担当者であるとしました。摘出される欠陥の例としては,アプリの業務ロジック考慮漏れ,(システムリプレースの場合)現行システムとの処理結果不整合,処理分岐やループ条件誤りなどを挙げられました。これらの欠陥は本来コードレビューあるいは単体テストで摘出すべきであるとし,特にコードレビューに力を入れて取り組むべきであるとの説明が行われました。QAはもっとコードレビューに積極的に取り組むべき,と提案がされました。

    • ディスカッション

    NaITE#18_session2_02  ディスカッションの冒頭では,QAのプロジェクトにおける役割および開発プロセスの全体像について。藤沢氏から説明が行われました。その後,QAがコードレビューに参画することで得られる価値,コードレビューの他にQAとしてできる活動について意見交換を行いました。QAはプロジェクトにおける第三者的な立場をとっており,開発プロセスに入り込みすぎるとその第三者的な視点が失われるのではないかとの意見も挙がりました。

    また,QAが実装の工程で特に取り組みやすい施策として「静的解析ツールの導入」があるとの意見も挙がりした。QAの立場として,プロジェクトでどのような活動を行っていくことが品質向上に寄与するか,有意義な意見交換を行うことができました。

    3 参考情報・リンク等

    当日の発表資料等は以下をご参照下さい。

    • オープニング資料

    http://www.slideshare.net/ssuser516465/naite-18

    • 「ISO/IEC DIS 20246の(ごく簡単な)説明」

    http://www.slideshare.net/ssuser516465/isoiec-dis-20246

    • 「提案:QAも実装に踏み込んでみよう」

    http://www.slideshare.net/mhlyc/qa-68822058

    4 次回の予定等

    次回は1月21日(土)「数学を学ぼう ~数学の知識を利用したソフトウェアテスト~」と題して,川崎駅周辺にて開催予定です。

    以上

    ーーーーーーーーーー
    2016年12月28日 作成
    報告者:藤沢 耕助(NaITE運営スタッフ)

    pdf:NaITE#18 「ISO/IEC DIS 20246の説明 他」 開催レポート

  • 【開催レポート】長崎QDG2016 レポート ~第九回:クロージングセッション

    長崎QDG2016_クロージング_01イベントを締めくくる(正確には中締めとなる)クロージングセッションは、 NaITE代表の池田より、改めて全ての参加者へ御礼申し上げました。参加者・登壇者・イベントサポーターのどの参加者が欠けてもQDGの場は存在し得ません。長崎QDG2016実行委員会としてもNaITEとしても感謝に堪えません。

     

    長崎QDG2016_クロージング_02次に全ての参加者に対して、長崎QDG2016プログラムで得られた気付きを是非日々の業務に生かして欲しいとお伝えさせていただきました。今回のプログラムはソフトウェア開発にとって競争力そのものである品質やテスト技術について様々な情報が取り上げられました。是非参加者の皆様には活用していただきたいと考えています。

     

    長崎QDG2016_クロージング_03また、池田からは半日を振り返っての感想もお伝えさせていただきました。第2回を迎えた長崎QDGは第1回目から着実に場として大きくなっています。

    ・開催規模は約2倍に
    ・セッションは約5倍に
    ・実行委員は3倍に
    ・サポータ制度を実施し協力いただけた

    長崎QDG2016_クロージング_04そして最後に次回についてアナウンスさせていただきました。詳細未定ではありますが、よりよい場となるように頑張ってゆくことを意思表示させていただきました。是非今後もご期待いただければと存じます。

     

     

    (報告:NaITEスタッフ)

  • 【開催レポート】長崎QDG2016 レポート ~第八回 :招待講演「形式手法と、モバイルやアジャイル」

    長崎QDG2016_招待講演_01長崎QDG2016の最後のセッションとなる招待講演は「形式手法と、モバイルやアジャイル」と題して、長崎県立大学の日下部 茂 氏にご登壇いただきました。

    開発対象のトレンドの観点からAndroidアプリを対象にしたセキュリティモデルの分析での形式手法の活用、開発プロセスの観点からはアジャイルと形式手法の組み合わせによる相乗効果の追求といった事例、動向をご紹介いただきました。セッションのアブストラクトは次の通りです。

    ■アブストラクト

    「 形式手法なんて日々の活動とは縁遠いイメージをお持ちでしょうか? 本発表では、開発対象のトレンドの観点からはAndroidアプリを対象にしたセキュリティモデルの分析での形式手法の活用、開発プロセスの観点からはアジャイルと形式手法の組み合わせによる相乗効果の追求、といった事例や動向を紹介します。」

    セッションでは、何かと堅いイメージで捉えられる形式手法を最近の動向を交えてご解説いただきました。この様子をレポートします。

     ■アジャイルと形式手法の組み合わせ

     形式手法の動向として、より効果的に開発を進める取り組みから、開発プロセスにおけるアジャイルと形式手法の組み合わせについて紹介いただきました。開発プロセスをいくつかの要因の組み合わせで評価した資料を取り上げ、ライフサイクル全体で評価した時アジャイルはプロセスとしてどう評価できるかを解説いただきました。アジャイルを適用すれば全てがうまくいくということはなく、全体で評価してみるとアジャイルにも設計ドキュメントの整備などの弱点があり、形式手法を活用することでアジャイルの欠点を補完できるとしました。Agileフレームワークの検証へのモデル検査の適用、TDDへの適用、自然言語記述からのモデル生成など、効果的に組み合わせることで相乗効果が発揮できるとのことです。また、証明を用いるような形式手法であっても、開発メンバ、開発プロセスを整えることができればアジャイルへの適用は可能であり、実際に事例もあるとのことです。

    ■Androidアプリを対象にしたセキュリティモデルの分析での形式手法の活用

     次に、アプリケーション単体ではなく、アプリケーション間連携時におけるセキュリティの問題を検出したいという目的で、形式手法を活用した事例を紹介いただきました。この事例では仕様記述言語としては”Alloy”を選択し、分析器は”Alloy Analyzer”を使用したとのことでした。Alloyを選択した理由としては、理解が容易であることやツールの支援が充実していることなどが挙げられました。

     セキュリティの問題として”Intent Hijack” が例示されました。例えば「デバイスの位置情報を外部に送信するため、アプリケーションの脆弱性を利用する」というものです。 Androidフレームワークの形式的モデルは、モデル抽出器とシグネチャを対応付け、モデルをインプットにして反例を見つけるものだとのことでした。これにより、想定していないパーミッションがないかなどを発見できるそうです。また、検証するためにソースコードは必要なく、スマートフォンから検証できるというのも目新しく感じられました。

     ■ハザード分析法 ”STAMP”の紹介

     ソフトウェア関連の事故や障害の発生を防ぐため、安全性の向上が求められています。しかし、IoTに代表されるように様々なものがつながって相互作用を持ち得る現代においては個々のソフトウェアの信頼性を高めるだけでは不十分であり、より包括的な観点で確認しなければ安全性を確保することは難しくなってきています。この問題への対応として、相互作用とコントロールに着目したハザード分析法”STAMP”が紹介されました。STAMPを用いることで、ソフトウェアやハードウェア、社会システムも含む包括的な分析が可能になるということです。また、STAMPは相互作用に着目するので、プロセス改善といった技術分野にも応用することもできるとのことでした。

    STAMPについては日本でもワークショップが開催されるとのことで、興味のある方は参加を検討してみてはいかがでしょうか。(第1回 STAMPワークショップ in Japan)

     当日の参加者は、普段の開発は形式手法について触れる機会がそれほど得られていないようでしたが、それだけに参考になったようです。ソフトウェア品質を確保していくためにはソフトウェアテスト技術以外の技術も活用していく必要があり、形式手法の活用も今後さらに重要になっていくと感じました。

    (報告:藤沢 耕助)

  • 【開催レポート】長崎QDG2016 レポート ~第七回 :コミュニティアピールセッション

    長崎QDG2016_コミュニティアピールセッション_01コミュニティアピールセッションとは非営利の技術コミュニティに活動紹介やアピールの場を提供するセッションで、休憩中に実施するレストタイムスライドセッションの資料を使って2分の持ち時間でLTをしていただくものです。

     

     

    今回は次のコミュニティにご登壇いただきました。

    • 盛岡ソフトウェアテスト勉強会
    • バグ票ワーストプラクティス検討プロジェクト

    また今回はイベントサポーターの オーエスエスブロードネット株式会社 にもご登壇いただきました。参加者はこれまで知らなかった活動や情報に触れ興味深そうにメモを取っていました。

    各コミュニティおよびイベントサポーターの資料については、 資料を公開しておりますのでご参照下さい。

     

    (報告:NaITEスタッフ)

  • 【開催レポート】長崎QDG2016 レポート ~第六回 :セッション「テストケース選択手法の研究・開発と実践 〜テストの資産を蓄積することから始めよう〜」

    「テストケース選択手法の研究・開発と実践 〜テストの資産を蓄積することから始めよう〜」と題して、株式会社東芝 小笠原 秀人 氏にご登壇いただきました。

    東芝は愛媛大学と共同で不具合の早期検出を目指して、「膨大なテストケースの中から投入可能な工数の範囲内で実施可能であり、かつ不具合検出の期待が最も高くなるようにテストケースのセットを選択する手法」の研究・開発を進めています。セッションのアブストラクトは次の通りです。

    ■アブストラクト

    「 ソフトウェア開発の終盤に位置するテストは、ソフトウェアの品質を確保するための重要な工程である。近年、ソフトウェアの大規模・複雑化に伴いテストケースの規模も数千~数万件に増加しているが、その一方で、開発期間は短縮される傾向にある。このような状況下でも、ソフトウェアの品質を確保するためには、ソフトウェアに潜在する不具合をなるべく早期に検出し、その修正を確実に実施することが重要である。

     東芝は、愛媛大学と共同で、不具合の早期検出を目指して、膨大なテストケースの中から、投入可能な工数の範囲内で実施可能であり、かつ、不具合検出の期待が最も高くなるようにテストケースのセットを選択する手法の研究・開発を進めている。

     本発表では、研究開発の成果をテスト管理ツールTETRAPLUSの機能として組み込み、実践した結果を紹介します。」

    セッションでは、その研究開発成果をテスト管理ツール「TETRAPLUS」の機能として組み込み実践した事例を紹介いただきました。この様子をレポートします。

    ■テスト管理ツール「TETRAPLUS」の概要

     TETRAPLUSについてはこれまでの他のシンポジウムでの発表でも紹介されているとおり、以下のような機能が実装されています。

    ・テスト資産の保管
    ・最新のテスト実施状況の表示
    ・蓄積されたテスト資産の可視化
    ・テスト資産の再利用

    これらの機能を実装する背景としては、次の狙いや目的があったそうです。

    ・曖昧になりがちなテスト(システム仕様)をチーム全体で共有する
    ・リアルタイムでテスト進捗の確認を行う
    ・テスト管理作業の工数を軽減する

      テスト資産はテスト担当者、開発者、プロジェクトリーダといった立場の異なるメンバが参照するため、それぞれが確認したいことをスムーズに確認できるような機能を実装することで、品質改善や効率向上に寄与できたとのことです。

     ■テスト終盤における課題と、テスト計画最適化技術

     テスト終盤に行うリグレッションテストにおいては、テスト資産(テストケース)が蓄積されていくとその全てのテスト資産を実行できなくなったり偏ったりして、テスト資産やテスト全体を網羅していくのが困難になるという課題がありました。今回はその課題解決のために開発している、テスト選択手法について紹介いただきました。

     テスト選択手法における目的は「不具合検出の可能性の高いテストを優先的に実施する」というものです。これを実現することにより、不具合が早期に検出できるようになり、不具合摘出の早期収束、テストの手戻り工数の削減といった効果が期待できます。(前提条件として、ソースコードとテスト項目の紐付けを行うのは困難であること、またテスト項目がすでに用意されており、それらのテスト項目にはテスト結果が多数蓄積されていることも示されました。)

     今回紹介された手法は、テストの履歴データから各テストケースの実行価値(優先度)を算出し、リグレッションテストに採用するテストセットの案を開発者に提示するというものです。不具合を検出する可能性が高いテスト項目ほど実行価値が高いとし、どんなテスト項目が不具合を検出できそうかという予測には「過去にそのテストが不合格となった割合」「最後にテストを実施してから現在までの、テスト未実施期間の長さ」などの情報を用いたとのことです。先行研究としては、愛媛大学 阿萬 裕久准教授の「論理的制約条件付き0-1計画モデルを用いた重点レビュー計画法」を参考にしたとのことでした。

     先に紹介されたツールでテスト資産を着実に蓄積しテストの再利用を進め、今回紹介された手法を実践するためにはツールの力が必要となります。テスト管理ツールをうまく利用することでテスト資産を有効利用できるわけですが、残念ながらテスト管理ツールの普及はまだまだといいうのが現状です。小笠原 氏は「まずはテスト管理から実践し、テストの資産を蓄積していこう。」と、地道にテスト管理に取り組むことの重要性をアドバイスしていました。

      リグレッションテストのテスト実行の効率化や工数削減は一般的な取り組みとなりつつありますが、テストセットの選択は手動で行っていることが多いのではないでしょうか。テストの履歴データをテストセットの選択に活用するという取り組みは、近年のビッグデータへの関心の強まりも相まって発展性があるように感じました。

    (報告:藤沢 耕助)

  • 【開催レポート】長崎QDG2016 レポート ~第五回 :NaITE-SIGセッション「バグ票システム立ち上げに必要なコト」

    本セッションは、NaITEのバグ票システム検討SIGによる報告セッションです。セッションはSIGメンバであり、また本ガイドの執筆者である岡内 佑樹 氏にご登壇いただきました。

    「NaITEのバグ票システム検討SIG」は「NaITE(長崎IT技術者会)」と「バグ票ワーストプラクティス検討プロジェクト」による合同SIGです。両団体の知見を持ち寄り、バグ票システムを有効に活用するためにガイドを作成するなど活動しています。セッションのアブストラクトは次の通りです。

    ■アブストラクト
    「 NaITEでは現在バグ票システム検討SIGが活動中です。本セッションではSIGでまとめた成果物「はじめてのソフトウェア開発バグ票システム ~導入実践ガイド」をベースに、企画~稼働までの基本的なプロセスやアクティビティについて解説します。」

    セッションでは、バグ票システム検討SIGの紹介と成果物である「はじめてのバグ票システム ~導入実践ガイド」からバグ票システムの企画から稼働までプロセスの概要が解説されました。この様子をレポートします。

    ■ガイド作成に至るまで

    バグ票システムについてはそのインストールや導入に関しては書籍や情報は多く存在しインストールするだけならば大きな問題も起きずに行えることが多いのですが、安易な導入は上手くいかないと説明されました。その場その場の安易な判断でバグ票システムを導入してしまうと様々な問題が起き、この問題が積み重なっていくと、最終的にはバグ票システム自体が利用されなくなってしまうこともあるとのことでした。

    このためバグ票システムの導入には稼働前の検討が重要なのですが、そのような導入前に検討すべき内容について言及している文献を見かけないため、SIGメンバが持つ知見を整理しガイドとしてまとめることになったとのことです。

    ■バグ票システム導入のプロセス

    今回作成したガイドではバグ票システムの導入プロセスを次のように定義したと解説されました。

    「企画」では、システムを導入する目的、誰が、いつ、どこで、いつまで使用するのかなど導入目的を明確化する必要があります。
    「設計」では、バグ票のワークフローや情報項目、必要な機能、動作環境等のインフラ等を考える必要があります。
    「実装」では、設計プロセスで検討した内容をシステムに落とし込むにあたって世の中にあるバグ票システムを比較検討し、採用するシステムを確定し、そのシステムに応じて具体的な実装仕様を細かく定義する必要があります。
    「テスト」では、設計の段階で検討したワークフローや情報項目などがシステムにきちんと実装されているかなどを試験する必要があります。
    「稼働準備」では、システムが円滑かつ有効に運用されるようにステークホルダへの説明会やユーザに対する導入教育、マニュアルの整備などの必要があります。

    ■その他、バグ票システムを有効活用するために知っておいた方がよいこと

    また、バグ票システムを有効活用するために知っておいた方がよいこととしてバグ票についてのワーストプラクティスについて紹介がありました。このセッションではガイドから「バグピンポン」が紹介されました。これは開発者とテスト担当者でバグ票や問い合わせが行ったり来たりして収束しない状況を指します。このような状況に陥らないようにするためにワーストプラクティスについての知識を持っておいた方がよく、詳細についてガイドを参照して欲しいとのことでした。

    今回紹介された「はじめてのバグ票システム ~導入実践ガイド」はNaITE公式サイトのSIGページから参照・ダウンロード可能です。氏からはバグ票システムの導入を考えている方、現在バグ票システムを導入している方には是非活用してもらいたいと締めくくられました。

     

    (報告:角田 俊)

  • 【開催レポート】長崎QDG2016 レポート ~第四回 :ワークショップ「“KAIZEN”してますか?~現場力の源泉は改善活動にあり!~」

    長崎QDG2016_ワークショップ_01ワークショップは「“KAIZEN”してますか?~現場力の源泉は改善活動にあり!~」と題して、株式会社デンソー技研センターの古畑 慶次 氏に登壇いただきました。

    “KAIZEN”とは?現場力とは?という切り口から、仕事をしていくうえでのあるべき姿についての議論です。セッションのアブストラクトは次の通りです。

     

    ■アブストラクト(御厚意により公開いただいた発表資料:qdg2016_workshop_kobata)
    「 日本の改善活動は、“KAIZEN”として海外でも注目されています。しかし、ソフトウェア開発では、改善活動は製造現場の活動という意識が強く、敬遠しがちなのではないでしょうか?本講義では、改善のエッセンスを解説し、改善事例をワークショップ形式で考えてみます。短い時間ですが、改善活動が技術者の達成感や働く喜び、現場の活力に直結する活動であることを理解して頂ければと思います。
    」

    本セッションは、会場の参加者に対してKAIZENのエッセンスを盛り込んだ問いかけをしながら、事例をご紹介いただくという流れで進んでいきました。古畑氏と参加者による議論を中心にレポートいたします。

    ■“KAIZEN”のエッセンスについての議論

     「仕事とは?」 - 仕事とはなんでしょう。-

     議論は、この問いかけから始まりました。

     「仕事」は、いつ、だれがお金を払ってくれるかが明確なものであり、この問いかけに答えられないということは、仕事が成り立っていない状況があるとし、また、仕事が成り立ってないことに対して改善はできない、と解説いただきました。

    「日常の業務では、何をしていますか?」「お客様に認めてもらえる価値を出していますか?」と、さらに問いかけが続きました。対価をいただくための価値を提供するために、日常の業務で何をしているのか、目的は何か、仕事とは何かを意識していなければいけないということを痛感させられました。

    さらなる問いかけは、「競争相手は必要か?」というものでした。

    お客様の要求に対し、一番価値を提供できたところへ対価は支払われます。よって、価値の創造への試みが独りよがりにならないため、また努力のモチベーションを保つために、競争相手は必要となると解説されました。

    では、「会社の競争力とは何でしょうか?」

      ―それは生産性である。

    生産性とは、「売り上げを原価で割ったもの」であり、その生産性を競争相手より高くしていくことこそが、競争に打ち勝っていくことであると解説されました。生産性を高くするということは、原価を抑え売り上げをあげていくことになります。ソフトウェア開発では期間を短くすることで生産性を向上することができます。期間を短くするために無駄を省き、付加価値を生む作業を行うことこそが生産性を高めることであり、「リーンソフトウェア開発」とはこのことを指す言葉であるとされました。

    改善とは、あるべき姿がゴールであり、あるべき姿と現状とのギャップを埋めていく作業であると説明されました。そして、維持・改善を繰り返すことが重要であり、いきなり100点を目指さずにまずは60点くらいを目指し細かく継続的に活動を行っていけばよいとのことでした。すべての改善は、会社の競争力に寄与するものでなければならないと講義いただきました。

     ■改善事例紹介

     改善事例紹介では「システムテストの不具合対策」の事例を紹介いただきました。

    対策の一例としてチェックリストを作り再発防止を防ぐ、などが挙げられていましたが、これが本当に最良の一手なのか?という問いかけがあり、参加者にて他のアプローチの提案など議論を行ないました。氏からは様々な手があるが、改善活動として実施するも何のための活動なのかわからくなったり、苦しくなったりすることがあるは、結果が出ない(出にくい)ことに取り組んでいることが一因であろうとされました。改善活動が技術者の達成感や働く喜び、現場の活力に直結する活動であること、また、技術者としても組織としても成長し喜びを感じていく改善活動が一番うまくいくものであり、それを深く考えながら改善活動に取り組んでいくことが大切だということを実感させていただきました。

      氏は「技術者としてWin、組織としてWinとなるような改善活動を。」とセッションを締めくくりました。その言葉に参加者は感じ入るものがあったようです。30分という限られた時間ながらも、参加者それぞれが議論を通してKAIZENについての理解を深める貴重なセッションとなっていました。

    (報告:岡野 麻子)

  • 【開催レポート】長崎QDG2016 レポート ~第三回 :基調講演「テストと海外とワタシ 2016 in Nagasaki」

    長崎QDG2016_基調講演_01長崎QDGでは初の実施となる基調講演です。この記念すべき第一回の基調講演は、ガイオ・テクノロジー株式会社の大西 建児 氏に「テストと海外とワタシ 2016 in Nagasaki」というタイトルでご登壇いただきました。

    本講演では、ソフトウェアテスト技術をテーマとして、海外活動へ取り組む経緯や取り組んでこられたことなどのキャリア面からのお話や、海外の技術動向について豊富な話題をご提供いただきました。セッションのアブストラクトは次の通りです。

    ■アブストラクト(御厚意により公開いただいた発表資料:qdg2016_keynote_onishi)

    「 鎖国時代において海外と日本の窓口であった長崎は「技術を海外に学び、技術で国を拓いてきた」土地であり、今もなお海外から多くの物事を受け入れています。本セッションではテスト技術について、海外のカンファレンスや国際会議への参加経験から、海外の技術動向や今後国内でも導入が進んでゆくであろう技術について紹介や解説をいたします。 テスト技術でも国を拓いていきましょう!」

    本基調講演の「海外のソフトウェアテスト技術の動向」の話題についてレポートいたします。

     氏によると、テスト技術はここ最近モデルベーステスト、組み合わせテスト、探索的テストなど様々な技術が話題になっていますが、技術そのものとしては実は10年前ほど前からそれほど大きな変化は起きていないとのことです。しかしながら、テスト技術について体系的な整理が進んだり、規格が制定されたりなどの変化が起きています。今回は「ISTQBに見るテスト技術の動向」と「国際標準にみるテスト技術の動向」の2つについてご紹介およびご解説いただきました。

     ■ISTQBに見るテスト技術の動向

     ISTQBは「テスト技術者を認定するための、最も成功しているスキーム(日本語訳)」とされています。ISTQBは日本ではJSTQBがシラバスの日本語化や試験の運用を実施しており、国内ではFLやALといったレベルを認定されるテストエンジニアが増加の一途を辿っています。ISTQBは従来モジュール(レベル)体系として、FoundationとAdvanced、そしてExpertが制定されていましたが、最近Advanced LevelはSpecialistモジュール、Agileモジュール、Coreモジュールの3つによる構成に変更になった(なる)と変更がなされているとのことです。

     そのほか、テスト技術の領域をカバーするにはStaticなテストとDynamicなテストの両方を学ぶ必要があるとし、またその領域とISTQBのスキームがどのように関連しているかを解説いただきました。例えば、まだ日本語訳されていないテクニカルテストアナリストのシラバスには、システムテストレベルの技法よりも開発者寄りのテスト技法が掲載されているそうです。さらに、近年はユーザビリティに関連してHCD(Human-Centered Design)などの分野も発展してきており、Accessibilityなどについてもその品質を意識して開発しないとプロダクトリスクにつながるため、テストもこれまで以上に十分に意識していく必要があると解説されました。

     ■国際標準に見るテスト技術の動向

     次に国際標準面からの解説がありました。Automotive分野からISO26262やIEC6508におけるソフトウェアテスト技術の扱われた方について規格を参照しながら解説していただきました。氏によると、他にも沢山の規格や標準があるが、それぞれの規格の中でテスト技法の位置づけや記載のされ方には差異がありながらもベースとなる技術には大きな差異はないとのことでした。多くの規格とその成り立ちについて説明いただき、なかなか系統立てて学ぶ機会の少ない国際標準について理解を深められる貴重な機会となりました。

    また、これから標準を参照してみようという方に向けて、特に英語で書かれた技術ドキュメントを読む際は誤訳して読み進めないよう注意する必要があるというようなアドバイスがありました。例えば”Function Coverage “を関数カバレッジと訳すのと機能カバレッジと訳すのかで全く意味が異なってくる」といったものです。

     基調講演は「テスト技術についてはベースとなる技術をしっかりと押さえておけば大丈夫。それをもって臆せず世界に羽ばたいていきましょう」とエールを送っていただき、締めくくられました。会場の参加者も、なかなか目を向けることの少ない海外の技術動向情報や実際に経験についてのお話に触れることで、おおいに刺激を受けた様子でした。

    (報告:藤沢 耕助)