@鱈 / 31日前 GitHub Copilot Computer UseはE2Eテストの代わりになるのか試してみた GitHub CopilotのComputer UseでE2Eテストの一部を代替できると試した自然言語で操作シナリオを渡すことで画面操作を実行、ドラッグ&ドロップやアイコン操作を含む6つのシナリオを実施ホバー操作やツールチップの確認は制約があり、人間の目視確認が必要な場合がある #AIエージェント#フロントエンド#テスト
@Dokokade / 31日前 【git-qa】テスト仕様書を AI に流させて、合否は人が 1 打鍵で置く(human-in-the-loop QA) git-qaはAIがテスト仕様書を流し、人が1打鍵で合否を判定するツールAIが操作を自動化し、人間がライブ映像で確認してD/Fキーで判定、証跡に名前と時刻を記録判定結果は5種類に分類され、AIが通したケースと人間が確認したケースを明確に区別する #テスト#DevOps・CI/CD#OSS
@tetsu.k / 34日前 良いテストを書き、良いテストを見分ける ─『単体テストの考え方/使い方』のエッセンス 単体テストの良し悪しを判断するための4つの基準が示されている退行に対する保護、リファクタリングへの耐性、迅速なフィードバック、保守のしやすさの4つがテストの価値を決めるテストが誤報を起こさないことを優先し、設計を見直すことでテストの信頼性を高めるべき #テスト#アーキテクチャ#DevOps・CI/CD
@Shinn_Matsumoto / 34日前 【合格体験記】AWSクラウドプラクティショナー798点、教科書読むだけで10時間浪費 AWSクラウドプラクティショナー試験に15時間の勉強で合格した教科書を10時間読むと問題サイトで150問解くことで対策した教科書は図表やイラストが多いものを選ぶべきで、サービス名を問う問題は10問程度しかなかった #クラウド#テスト
@y0us91 / 34日前 AIは指示を無視する。だから品質保証をPromptに置いてはいけない AIに品質保証を任せるのは危険で、指示だけでは守られないテスト実行や変更制限の指示はAIが無視する可能性がある、CIや自動チェックで強制する指示を守らなかった場合に自動でブロックする仕組みが必要で、テスト結果だけでは品質保証にならない #AIエージェント#DevOps・CI/CD#テスト
@Isuzu / 37日前 QAエンジニアがAI生成E2Eテストの「Spec Drift」を多層で潰した話 〜事前検査・実行時検出・仕様追従〜 AI生成E2Eテストで仕様と実装のズレを事前検査と実行時検出で潰す仕組みを構築事前検査で4段階判定、実行時検出で失敗原因を3分類、ヒーリング3階層で自動修正範囲を段階的に広げるテスト生成前にズレを検出する事前検査と、失敗時に原因を分類して自動対応する仕組みを組み合わせる #テスト#AIエージェント#DevOps・CI/CD
@おかもり / 38日前 HTMLを解釈できないJevに、Line-by-line searchでスクレイパーの失敗原因を探させてみた JevにHTMLの行番号を付けて検索させることで、スクレイパーの失敗原因を特定できるHTMLの各行にL000|の形式で行番号を付けて渡し、選択肢に行IDを設定して検索、Noulで要素の存在確率を確認役割の説明文の書き方で検索結果に影響が出るため、明確な説明文の作成が重要 #DevOps・CI/CD#バックエンド#テスト
@jota9613 / 39日前 useStateとuseRefの違いについて useStateとuseRefは状態の更新と保持に使い分けられるuseStateは再レンダリングをトリガーし、useRefは変更を画面に反映しない再レンダリングが必要な場合にuseStateを使い、不要な場合はuseRefを選ぶべき #フロントエンド#アーキテクチャ#テスト
@keikeigo / 39日前 「TestingLibraryElementError: Found multiple elements with the text」の解決方法【Vitest/React Testing Library】 VitestでReactテスト中に複数のDOMがレンダリングされてエラーが発生beforeEachでrenderを実行しafterEachでcleanupを追加、またはグローバルにafterEachを設定テストごとにDOMをクリーンアップしないとエラーが発生するため、afterEachでcleanupを実行する #フロントエンド#テスト#DevOps・CI/CD
@HP的観測 / 39日前 CPUが2コアだとjestは終わらない — in-band実行とpendingのままのMutation CIで2コアの環境ではjestがテストを終わらせないin-band実行と5分ごとのpending Mutationのタイマーが原因、setTimeoutProviderでタイマーをunrefする対応CIと手元の差はコア数から生じる、-iオプションで再現し--detectOpenHandlesで問題を特定する #フロントエンド#バックエンド#テスト
@ikumi / 39日前 業務と両立しながら継続するGoogle Cloud勉強会の作り方 Google Cloud Associate Cloud Engineerの資格取得を目指した勉強会を2ヶ月間実施し、参加者の半数以上が合格した持ち回り制の運営、Power Automateによる自動リマインド、問題の資産化と復習回の実施問題作成の負荷を減らすために過去問を主に使い、生成AIを活用した解説作成を検討すべき #クラウド#DevOps・CI/CD#テスト
@ikedan / 39日前 QAにおける敵対的レビューのすゝめ 敵対的レビューをかけると反例が無限に出てきて実用不能になる。前提と止める基準を明確にすることでレビューの有効性を高められる前提を明文化し、検知器で違反を検出、指摘を3つに分類、実データの誤判定につながる指摘だけをブロッカーにする前提と止める基準を事前に伝えることで、レビューが終わりのない反例探しから道具を育てる対話に変わる #テスト#アーキテクチャ#DevOps・CI/CD
@GitHub OSS / 41日前 e2e e2eは自然言語でテスト目標を記述し、エージェントがアプリを操作して結果を検証するエンドツーエンドテストフレームワークエージェントステップが記録され、以降の実行ではモデル呼び出しをせずに再実行される。テストにエージェントステップがなければモデルは不要で、独自のサブスクリプションやAPIキー、ローカルモデルを指定できるテストコードにエージェントステップを含む場合、そのアクションが記録され、以降の実行ではモデル呼び出しをせずに再実行される #テスト#DevOps・CI/CD#OSS
@nolanlover0527 / 42日前 「実装に問題が無いか調査して」は意味が無い? AIレビューが空振りする理由と効果的な指示のテンプレ 「問題ないか調査して」はAIの自己評価にとどまりやすく、信頼できる検証手段を渡す必要があるテスト実行やビルド、公式ドキュメントとの照合、合格基準の明示が効果的テストが通ることと正しいことには違いがあり、人間のレビューは不可欠 #DevOps・CI/CD#テスト#AIエージェント
@文系AWS系クラウドエンジニアさん / 44日前 AWSの勉強用アカウントで、使っていないIPアドレスに払った3.60ドルを数えてみた AWSのElastic IPアドレスが未使用でも3.60ドルの請求が発生したElastic IPは停止したEC2から解放しないと料金が発生し、1時間0.005ドルで1日0.12ドルとなる未使用のElastic IPは解放する必要があり、試験対策として料金問題を54問解くことが推奨される #クラウド#DevOps・CI/CD#テスト
@Link and Motivation Developers' Blog / 44日前 エラー対応設計: 例外と障害を区別しよう エラー監視ツールに通知すべきは障害であり、例外や異常系の処理は区別する異常系は仕様通りに処置されれば障害ではない、バグはコードの復旧が必要、例外は言語機構で異常系とバグの両方に発生例外を捕捉する箇所で復旧作業が必要かどうかを判断し、過剰な通知を避ける #バックエンド#DevOps・CI/CD#テスト
@aganesy / 44日前 ユニットテストは不要なのか? AI時代でもユニットテストは必要だと主張テストの役割分担、テストを書くルール、コードレビューでのテストの見方テストのケースの過不足や期待値の間違いを確認する必要がある #テスト#DevOps・CI/CD#アーキテクチャ
@masashige0904 / 46日前 AI生成コードを全部同じ密度で読む必要はある?―レビューを契約とテストで絞る設計 AI生成コードのレビューを契約とテストで絞る設計を提案契約による設計、副作用の隔離、抽象化、契約をテストに変換するAIに正しいコードを書かせるのではなく、人間が正しさの条件を先に決めることが重要 #アーキテクチャ#DevOps・CI/CD#テスト
@y.morimoto / 46日前 AI Slop なテストコードにならないためにどう対処するか? AIが生成したテストコードは品質を保証しないテスト設計を人間が行い、PRDやFigmaなどの上位文書をAIに提供するテスト仕様の作成はAIに任せず対話形式でレビューする #テスト#DevOps・CI/CD#アーキテクチャ
@wheesnoza / 46日前 LaravelのAI開発を支える品質検査と開発フロー LaravelでAI開発を支える品質ハーネスとして、静的解析やテストの結果を機械的に検証する仕組みを導入しているLarastanで型の不整合を検出、Pest Archテストで設計ルール違反を検出、Laravel Pintでコードスタイルを統一テストの実行結果と行カバレッジ100%を基準にし、ミューテーションテストで検証力の確認が必要 #バックエンド#DevOps・CI/CD#テスト