テストランナー
はじめに
Playwright for .NETは特定のテストランナーやテストフレームワークに縛られていませんが、私たちの経験上、MSTest、NUnit、またはxUnit用に提供されている基本クラスを使用するのが最も簡単な始め方です。これらのクラスは、複数のブラウザエンジンでのテスト実行、起動/コンテキストオプションの調整、そしてテストごとにPage/BrowserContextインスタンスをすぐに取得することをサポートしています。
PlaywrightとBrowserインスタンスは、パフォーマンス向上のためテスト間で再利用されます。各テストケースを新しいBrowserContextで実行することをお勧めします。これにより、ブラウザの状態がテスト間で分離されます。
- MSTest
- NUnit
- xUnit
Playwrightは、Microsoft.Playwright.NUnit
パッケージを介してNUnitでテストを記述するための基本クラスを提供しています。
Playwrightは、Microsoft.Playwright.MSTest
パッケージを介してMSTestでテストを記述するための基本クラスを提供しています。
Playwrightは、Microsoft.Playwright.Xunit
パッケージを介してxUnitでテストを記述するための基本クラスを提供しています。
始めるには、インストールガイドを確認してください。
並行してテストを実行する
- MSTest
- NUnit
- xUnit
デフォルトでは、NUnitはすべてのテストファイルを並行して実行しますが、各ファイル内のテストは順番に実行します(ParallelScope.Self
)。ホストシステムのコア数と同じ数のプロセスが作成されます。この動作は、NUnit.NumberOfTestWorkersパラメーターを使用して調整できます。ParallelScope.Self
のみがサポートされています。
CPUバウンドのテストには、システム上のコア数を2で割った数のワーカーを使用することをお勧めします。IOバウンドのテストには、コア数と同じ数のワーカーを使用できます。
dotnet test -- NUnit.NumberOfTestWorkers=5
デフォルトでは、MSTestはすべてのクラスを並行して実行しますが、各クラス内のテストは順番に実行します(ExecutionScope.ClassLevel
)。ホストシステムのコア数と同じ数のプロセスが作成されます。この動作は、以下のCLIパラメーターを使用するか、以下の.runsettings
ファイルを使用して調整できます。メソッドレベルでの並行テスト実行(ExecutionScope.MethodLevel
)はサポートされていません。
dotnet test --settings:.runsettings -- MSTest.Parallelize.Workers=4
デフォルトでは、xUnitはすべてのクラスを並行して実行しますが、各クラス内のテストは順番に実行します。デフォルトでは、システム上のコア数と同じ数のプロセスが作成されます。この動作は、以下のCLIパラメーターを使用するか、以下の.runsettings
ファイルを使用して調整できます。
dotnet test -- xUnit.MaxParallelThreads=5
xUnit 2.8以降を使用することをお勧めします。これは、デフォルトで保守的な並行処理アルゴリズム
を使用します。
BrowserContextオプションのカスタマイズ
- MSTest
- NUnit
- xUnit
コンテキストオプションをカスタマイズするには、Microsoft.Playwright.MSTest.PageTest
またはMicrosoft.Playwright.MSTest.ContextTest
から派生したテストクラスのContextOptions
メソッドをオーバーライドします。以下の例を参照してください。
using Microsoft.Playwright.NUnit;
namespace PlaywrightTests;
[Parallelizable(ParallelScope.Self)]
[TestFixture]
public class MyTest : PageTest
{
[Test]
public async Task TestWithCustomContextOptions()
{
// The following Page (and BrowserContext) instance has the custom colorScheme, viewport and baseURL set:
await Page.GotoAsync("/login");
}
public override BrowserNewContextOptions ContextOptions()
{
return new BrowserNewContextOptions()
{
ColorScheme = ColorScheme.Light,
ViewportSize = new()
{
Width = 1920,
Height = 1080
},
BaseURL = "https://github.com",
};
}
}
コンテキストオプションをカスタマイズするには、Microsoft.Playwright.MSTest.PageTest
またはMicrosoft.Playwright.MSTest.ContextTest
から派生したテストクラスのContextOptions
メソッドをオーバーライドします。以下の例を参照してください。
using System.Threading.Tasks;
using Microsoft.Playwright;
using Microsoft.Playwright.MSTest;
using Microsoft.VisualStudio.TestTools.UnitTesting;
namespace PlaywrightTests;
[TestClass]
public class ExampleTest : PageTest
{
[TestMethod]
public async Task TestWithCustomContextOptions()
{
// The following Page (and BrowserContext) instance has the custom colorScheme, viewport and baseURL set:
await Page.GotoAsync("/login");
}
public override BrowserNewContextOptions ContextOptions()
{
return new BrowserNewContextOptions()
{
ColorScheme = ColorScheme.Light,
ViewportSize = new()
{
Width = 1920,
Height = 1080
},
BaseURL = "https://github.com",
};
}
}
コンテキストオプションをカスタマイズするには、Microsoft.Playwright.Xunit.PageTest
またはMicrosoft.Playwright.Xunit.ContextTest
から派生したテストクラスのContextOptions
メソッドをオーバーライドします。以下の例を参照してください。
using Microsoft.Playwright;
using Microsoft.Playwright.Xunit;
namespace PlaywrightTests;
public class UnitTest1 : PageTest
{
[Fact]
public async Task TestWithCustomContextOptions()
{
// The following Page (and BrowserContext) instance has the custom colorScheme, viewport and baseURL set:
await Page.GotoAsync("/login");
}
public override BrowserNewContextOptions ContextOptions()
{
return new BrowserNewContextOptions()
{
ColorScheme = ColorScheme.Light,
ViewportSize = new()
{
Width = 1920,
Height = 1080
},
BaseURL = "https://github.com",
};
}
}
ブラウザ/起動オプションのカスタマイズ
ブラウザ/起動オプションは、実行設定ファイルを使用するか、CLI経由で直接実行設定オプションを設定することでオーバーライドできます。以下の例を参照してください。
<?xml version="1.0" encoding="utf-8"?>
<RunSettings>
<Playwright>
<BrowserName>chromium</BrowserName>
<LaunchOptions>
<Headless>false</Headless>
<Channel>msedge</Channel>
</LaunchOptions>
</Playwright>
</RunSettings>
dotnet test -- Playwright.BrowserName=chromium Playwright.LaunchOptions.Headless=false Playwright.LaunchOptions.Channel=msedge
詳細APIログの使用
DEBUG
環境変数を使用して詳細APIログを有効にすると、標準エラー出力ストリームにメッセージが表示されます。Visual Studio内では、これは出力
ウィンドウのテスト
ペインになります。また、各テストのテストログ
にも表示されます。
.runsettingsファイルの使用
Visual Studioからテストを実行する場合、.runsettings
ファイルを活用できます。以下にサポートされている値の参照を示します。
- MSTest
- NUnit
- xUnit
たとえば、ワーカーの数を指定するにはNUnit.NumberOfTestWorkers
を使用したり、DEBUG
ログを有効にするにはRunConfiguration.EnvironmentVariables
を使用できます。
<?xml version="1.0" encoding="utf-8"?>
<RunSettings>
<!-- NUnit adapter -->
<NUnit>
<NumberOfTestWorkers>24</NumberOfTestWorkers>
</NUnit>
<!-- General run configuration -->
<RunConfiguration>
<EnvironmentVariables>
<!-- For debugging selectors, it's recommend to set the following environment variable -->
<DEBUG>pw:api</DEBUG>
</EnvironmentVariables>
</RunConfiguration>
<!-- Playwright -->
<Playwright>
<BrowserName>chromium</BrowserName>
<ExpectTimeout>5000</ExpectTimeout>
<LaunchOptions>
<Headless>false</Headless>
<Channel>msedge</Channel>
</LaunchOptions>
</Playwright>
</RunSettings>
たとえば、ワーカーの数を指定するにはMSTest.Parallelize.Workers
を使用できます。また、RunConfiguration.EnvironmentVariables
を使用してDEBUG
ログを有効にすることもできます。
<RunSettings>
<!-- MSTest adapter -->
<MSTest>
<Parallelize>
<Workers>4</Workers>
<Scope>ClassLevel</Scope>
</Parallelize>
</MSTest>
<!-- General run configuration -->
<RunConfiguration>
<EnvironmentVariables>
<!-- For debugging selectors, it's recommend to set the following environment variable -->
<DEBUG>pw:api</DEBUG>
</EnvironmentVariables>
</RunConfiguration>
<!-- Playwright -->
<Playwright>
<BrowserName>chromium</BrowserName>
<ExpectTimeout>5000</ExpectTimeout>
<LaunchOptions>
<Headless>false</Headless>
<Channel>msedge</Channel>
</LaunchOptions>
</Playwright>
</RunSettings>
たとえば、ワーカーの数を指定するにはxUnit.MaxParallelThreads
を使用できます。また、RunConfiguration.EnvironmentVariables
を使用してDEBUG
ログを有効にすることもできます。
<?xml version="1.0" encoding="utf-8"?>
<RunSettings>
<!-- See https://xunit.net/docs/runsettings -->
<xUnit>
<MaxParallelThreads>1</MaxParallelThreads>
</xUnit>
<!-- General run configuration -->
<RunConfiguration>
<EnvironmentVariables>
<!-- For debugging selectors, it's recommend to set the following environment variable -->
<DEBUG>pw:api</DEBUG>
</EnvironmentVariables>
</RunConfiguration>
<!-- Playwright -->
<Playwright>
<BrowserName>chromium</BrowserName>
<ExpectTimeout>5000</ExpectTimeout>
<LaunchOptions>
<Headless>false</Headless>
<Channel>msedge</Channel>
</LaunchOptions>
</Playwright>
</RunSettings>
Playwrightの基本クラス
- MSTest
- NUnit
- xUnit
Microsoft.Playwright.NUnit
名前空間にはいくつかの基本クラスがあります。
Microsoft.Playwright.MSTest
名前空間にはいくつかの基本クラスがあります。
Microsoft.Playwright.Xunit
名前空間にはいくつかの基本クラスがあります。
テスト | 説明 |
---|---|
PageTest | 各テストは、独自のBrowserContextで作成されたWebPageの新しいコピーを取得します。このクラスを拡張することが、完全に機能するPlaywrightテストを記述する最も簡単な方法です。 注: 各テストファイルで ContextOptions メソッドをオーバーライドして、コンテキストオプション(通常はBrowser.NewContextAsync()メソッドに渡されるもの)を制御できます。これにより、テストファイルごとにあらゆる種類のエミュレーションオプションを指定できます。 |
ContextTest | 各テストは、BrowserContextの新しいコピーを取得します。このコンテキストでは、好きなだけページを作成できます。このテストを使用すると、複数のタブが必要な複数ページシナリオを最も簡単にテストできます。 注: 各テストファイルで ContextOptions メソッドをオーバーライドして、コンテキストオプション(通常はBrowser.NewContextAsync()メソッドに渡されるもの)を制御できます。これにより、テストファイルごとにあらゆる種類のエミュレーションオプションを指定できます。 |
BrowserTest | 各テストはブラウザを取得し、好きなだけコンテキストを作成できます。各テストは、作成したすべてのコンテキストをクリーンアップする責任があります。 |
PlaywrightTest | これにより、各テストはPlaywrightオブジェクトを取得し、テストは好きなだけブラウザを起動および停止できます。 |