翼度科技»论坛 编程开发 .net 查看内容

Bogus 实战:使用 Bogus 和 EFCore 生成模拟数据和种子数据【完整教程】

3

主题

3

帖子

9

积分

新手上路

Rank: 1

积分
9
引言

上一章我们介绍了在xUnit单元测试中用xUnit.DependencyInject来使用依赖注入,上一章我们的Sample.Repository仓储层有一个批量注入的接口没有做单元测试,今天用这个示例来演示一下如何用Bogus创建模拟数据 ,和 EFCore 的种子数据生成
Bogus 的优势


  • 丰富的数据生成支持:Bogus 提供了广泛的 API 支持,涵盖了各种数据类型和用例,使得生成虚假数据变得非常灵活和方便。
  • 重复性和可控性:通过设置种子值,可以确保生成的虚假数据是可重复的,这对于需要一致的测试数据或示例数据非常有用。
  • 易于使用:Bogus 使用流畅的语法和简单的方法调用,使得生成虚假数据变得简单直观,即使是对库不熟悉的用户也可以快速上手。
  • 内置规则和语义:内置了许多常见数据类别的规则和语义,例如公司名称、产品名称、地址等,可以快速生成符合实际场景的数据。
  • 灵活性:除了内置规则外,还可以通过自定义规则来生成特定的数据,满足不同场景下的需求。
  • 社区支持:Bogus 是一个受欢迎的开源库,拥有活跃的社区支持和维护,可以获得持续的更新和改进。
Bogus 实战

简介

Bogus 是一个简单的.NET 语言(如 C#、F#和 VB.NET)的假数据生成器。Bogus 本质上是 faker.js 的 C#移植版本,并受到 FluentValidation 的语法糖的启发。
使用

创建新的xUnit测试项目dotNetParadise.Bogus
Nuget包安装Bogus
Install-Package Bogus
  1. 创建一个`Bogus`帮助类
  2. ```c#
  3. using Bogus;
  4. using Sample.Repository.Models;
  5. namespace dotNetParadise.Bogus
  6. {
  7.     public class BogusHelper
  8. ```package manager
  9. PM> NuGet\Install-Package Bogus -Version 35.5.0
复制代码
和上一篇的配置一样,测试项目需要添加仓储层的项目引用,并通过Nuget安装xUnit.DependencyInject,配置Startup。
先看一下我们的Staff实体
  1. public class Staff
  2. {
  3.     public int Id { get; set; }
  4.     public string Name { get; set; }
  5.     public string Email { get; set; }
  6.     public int? Age { get; set; }
  7.     public List<string>? Addresses { get; set; }
  8.     public DateTimeOffset? Created { get; set; }
  9. }
复制代码
接下来对我们批量新增的接口进行单元测试,测试数据通过Bogus生成,先看使用在讲解用法。
生成500条测试数据保存到 DB
  1. [Fact]
  2. public async Task BatchAddStaffAsync_WhenCalled_ShouldAddStaffToDatabase()
  3. {
  4.     // Arrange
  5.     var staffs = new Faker<Staff>()
  6.         .RuleFor(u => u.Name, f => f.Person.FullName)
  7.         .RuleFor(u => u.Email, f => f.Person.Email)
  8.         .RuleFor(u => u.Age, f => f.Random.Number(18, 60))
  9.         .RuleFor(u => u.Addresses, f => f.MakeLazy(f.Random.Number(1, 3), () => f.Address.FullAddress()))
  10.         .RuleFor(u => u.Created, f => f.Date.PastOffset())
  11.         .Generate(500);
  12.     // Act
  13.     await _staffRepository.BatchAddStaffAsync(staffs, CancellationToken.None);
  14.     // Assert
  15.     var retrievedStaffs = await _staffRepository.GetAllStaffAsync(CancellationToken.None);
  16.     Assert.NotNull(retrievedStaffs); // 确保 Staff 已成功添加到数据库
  17.     Assert.Equal(500, retrievedStaffs.Count); // 确保正确数量的 Staff 已添加到数据库
  18.     Assert.True(staffs.All(x => retrievedStaffs.Any(_ => x.Id == _.Id)));
  19. }
复制代码
看代码配置跟FluentValidation都是一样都是通过RuleFor来配置实体的属性
看一下生成的测试数据

Run Tests

单元测试成功,有了Bogus之后我们创建一些测试数据就方便多了
Bogus 的用法

locales 国际化

Bogus 支持许多不同的地区设置(locales),这些地区设置可用于生成特定语言或地区的虚假数据。您可以通过设置不同的 locale 参数来使用不同的地区设置。
Bogus 支持以下地区设置(locales)
Locale CodeLanguageLocale CodeLanguageaf_ZAAfrikaansfr_CHFrench (Switzerland)arArabicgeGeorgianazAzerbaijanihrHrvatskiczCzechid_IDIndonesiadeGermanitItaliande_ATGerman (Austria)jaJapanesede_CHGerman (Switzerland)koKoreanelGreeklvLatvianenEnglishnb_NONorwegianen_AUEnglish (Australia)neNepaleseen_AU_ockerEnglish (Australia Ocker)nlDutchen_BORKEnglish (Bork)nl_BEDutch (Belgium)en_CAEnglish (Canada)plPolishen_GBEnglish (Great Britain)pt_BRPortuguese (Brazil)en_IEEnglish (Ireland)pt_PTPortuguese (Portugal)en_INDEnglish (India)roRomanianen_NGNigeria (English)ruRussianen_USEnglish (United States)skSlovakianen_ZAEnglish (South Africa)svSwedishesSpanishtrTurkishes_MXSpanish (Mexico)ukUkrainianfaFarsiviVietnamesefiFinnishzh_CNChinesefrFrenchzh_TWChinese (Taiwan)fr_CAFrench (Canada)zu_ZAZulu (South Africa)有些地区设置可能没有完整的数据集,比如说,有些语言可能缺少某些数据集,例如中文(zh_CN)可能没有 lorem 数据集,但韩语(ko)有。在这种情况下,Bogus 会默认使用英文(en)的数据集。换句话说,如果找不到特定语言的数据集,就会退而使用英文的数据集。如果您有兴趣帮助贡献新的地区设置或更新现有的设置,请查看我们的创建地区设置页面获取更多信息。
来验证一下
  1.     [Theory]
  2.     [InlineData(null)]
  3.     [InlineData("zh_CN")]
  4.     public void Locales_ConfigTest(string? locale)
  5.     {
  6.         //default
  7.         var faker = locale is null ? new Faker<Staff>() : new Faker<Staff>(locale);
  8.         faker.RuleFor(u => u.Name, f => f.Person.FullName)
  9.             .RuleFor(u => u.Email, f => f.Person.Email)
  10.             .RuleFor(u => u.Age, f => f.Random.Number(18, 60))
  11.             .RuleFor(u => u.Addresses, f => f.MakeLazy(f.Random.Number(1, 3), () => f.Address.FullAddress()).ToList())
  12.             .RuleFor(u => u.Created, f => f.Date.PastOffset());
  13.         var staff = faker.Generate();
  14.         var consoleType = locale is null ? "default" : locale;
  15.         testOutputHelperAccessor.Output?.WriteLine($"{consoleType}:{JsonConvert.SerializeObject(staff)}");
  16.     }
复制代码
OutPut
  1.   default:{"Id":0,"Name":"Clyde Price","Email":"Clyde17@yahoo.com","Age":39,"Addresses":["46277 Abraham Parkways, South Spencerland, Guadeloupe","6470 Porter Island, Lesliehaven, Chad","10804 Halvorson Brook, Ninaton, Iran"],"Created":"2023-04-30T11:31:35.5106219+08:00"}
复制代码
  1.     zh_CN:{"Id":0,"Name":"昊焱 尹","Email":"_82@yahoo.com","Age":58,"Addresses":["孙桥5号, 珠林市, Costa Rica"],"Created":"2024-02-11T08:16:49.1807504+08:00"}
复制代码
可以看出默认是en 英文,通过设置locale可以实现国际化的输出。
生成相同数据集
  1. // 如果您希望生成可重复的数据集,请设置随机数种子。
  2. Randomizer.Seed = new Random(8675309);
复制代码
这段代码用于设置随机数生成器的种子,以便生成可重复的数据集。通过指定一个固定的种子值,可以确保每次运行生成的随机数据都是相同的,从而实现数据集的重复性。
这个比较有意思,我们来做个 demo,要求随机生成五个对象 要求下一次运行生成的还是同一批对象。
用Bogus的 Seed 就很容易实现。
  1.    [Fact]
  2.    public void Bogus_Compare_SeedTest()
  3.    {
  4.        // Arrange
  5.        var faker = new Faker<Staff>()
  6.            .RuleFor(u => u.Name, f => f.Person.FullName)
  7.            .RuleFor(u => u.Email, f => f.Person.Email)
  8.            .RuleFor(u => u.Age, f => f.Random.Number(18, 60))
  9.            .RuleFor(u => u.Addresses, f => f.MakeLazy(f.Random.Number(1, 3), () => f.Address.FullAddress()).ToList())
  10.            .RuleFor(u => u.Created, f => f.Date.PastOffset());
  11.        // Act
  12.        var staffs1 = Enumerable.Range(1, 5)
  13.            .Select(_ => faker.UseSeed(_).Generate())
  14.            .ToList();
  15.        OutputStaffInformation(staffs1, "第一次");
  16.        var staffs2 = Enumerable.Range(1, 5)
  17.            .Select(_ => faker.UseSeed(_).Generate())
  18.            .ToList();
  19.        OutputStaffInformation(staffs2, "第二次");
  20.        // Assert
  21.        Assert.True(staffs1.All(staff1 => staffs2.Any(staff2 => staff1.Name == staff2.Name && staff1.Email == staff2.Email)));
  22.    }
  23.    private void OutputStaffInformation(List<Staff> staffs, string iteration)
  24.    {
  25.        foreach (Staff staff in staffs)
  26.        {
  27.            testOutputHelperAccessor.Output?.WriteLine($"{iteration}: name: {staff.Name}, email: {staff.Email}");
  28.        }
  29.    }
复制代码

  • Arrange 部分初始化了一个 Faker 实例,并定义了一系列规则来生成 Staff 对象。
  • Act 部分通过使用不同的种子值,生成了两组包含 5 个 Staff 对象的列表,并输出了每个 Staff 对象的姓名和邮箱信息。
  • Assert 部分使用断言验证了两组生成的 Staff 列表中是否存在具有相同姓名和邮箱的对象,即通过 All 和 Any 方法进行比较。
通过使用不同的种子值来生成多组数据,然后断言这些数据中是否存在相同的姓名和邮箱信息。

Bogus Api 支持

Bogus之所以提供这么方便的假数据生成,得益于封装了开箱即用的获取各类数据的方法,如:
Address


  • ZipCode - 获取邮政编码。
  • City - 获取城市名称。
  • StreetAddress - 获取街道地址。
  • CityPrefix - 获取城市前缀。
  • CitySuffix - 获取城市后缀。
  • StreetName - 获取街道名称。
  • BuildingNumber - 获取建筑编号。
  • StreetSuffix - 获取街道后缀。
  • SecondaryAddress - 获取次要地址,如 '公寓 2' 或 '321 号套房'。
  • County - 获取县名。
  • Country - 获取国家。
  • FullAddress - 获取完整地址,包括街道、城市、国家。
  • CountryCode - 获取随机的 ISO 3166-1 国家代码。
  • State - 获取随机州名。
  • StateAbbr - 获取州名缩写。
  • Latitude - 获取纬度。
  • Longitude - 获取经度。
  • Direction - 生成基数或序数方向,例如:西北、南、西南、东。
  • CardinalDirection - 生成基数方向,例如:北、南、东、西。
  • OrdinalDirection - 生成序数方向,例如:西北、东南、西南、东北。
Commerce


  • Department - 获取随机商务部门。
  • Price - 获取随机产品价格。
  • Categories - 获取随机产品类别。
  • ProductName - 获取随机产品名称。
  • Color - 获取随机颜色。
  • Product - 获取随机产品。
  • ProductAdjective - 随机产品形容词。
  • ProductMaterial - 随机产品材料。
  • Ean8 - 获取随机的 EAN-8 条形码号码。
  • Ean13 - 获取随机的 EAN-13 条形码号码。
后面的可以查看官网 Api 官网地址在文末...
Bogus 库提供了丰富的 API 支持,涵盖了各种数据类型和用例,包括地址、商务、日期、金融、图片、互联网、Lorem 文本、姓名、电话等方面的虚假数据生成方法。

EFCore 利用 Bogus 生成种子数据

在我们的Sample.Repository中设置种子数据

  • 使用 Bogus 库生成虚假数据,填充到 Staffs 列表
  1. public class FakeData
  2. {
  3.     public static List<Staff> Staffs = [];
  4.     public static void Init(int count)
  5.     {
  6.         var id = 1;
  7.         var faker = new Faker<Staff>()
  8.             .RuleFor(_ => _.Id, f => id++)
  9.        .RuleFor(u => u.Name, f => f.Person.FullName)
  10.        .RuleFor(u => u.Email, f => f.Person.Email)
  11.        .RuleFor(u => u.Age, f => f.Random.Number(18, 60))
  12.        .RuleFor(u => u.Addresses, f => f.MakeLazy(f.Random.Number(1, 3), () => f.Address.FullAddress()).ToList())
  13.        .RuleFor(u => u.Created, f => f.Date.PastOffset());
  14.         var staffs = faker.Generate(count);
  15.         FakeData.Staffs.AddRange(staffs);
  16.     }
  17. }
复制代码

  • Program 写入 1000 条种子数据
  1. using (var context = app.Services.CreateScope().ServiceProvider.GetRequiredService<SampleDbContext>())
  2. {
  3.     context.Database.EnsureCreated();
  4.     FakeData.Init(1000);
  5.     await context.Staffs.AddRangeAsync(FakeData.Staffs);
  6.     await context.SaveChangesAsync();
  7. }
复制代码
我这地方用的是Microsoft.EntityFrameworkCore.InMemory内存数据库,正常如果使用像Sqlserver,MySQL等CodeFirst模式可以在 DbContext 的OnModelCreating配置种子数据。
  1.     protected override void OnModelCreating(ModelBuilder builder)
  2.     {
  3.         base.OnModelCreating(builder);
  4.         //FakeData.Init(1000);
  5.         //builder.Entity<Staff>().HasData(FakeData.Staffs);
  6.     }
复制代码
来测试一下
通过我们Sample.Api提供的GetAll的方法测试一下种子数据

正好一千条测试数据,大功告成。
最后

在软件开发中,使用 Bogus 可以极大地简化测试数据的创建过程,同时结合 EFCore 的种子数据功能,可以快速生成并初始化数据库中的虚假数据。这种方法不仅提高了开发效率,还能确保测试数据的质量和一致性。通过本文的示例和说明,希望您能更加熟悉如何利用 Bogus 和 EFCore 来生成模拟数据和种子数据,从而为软件开发过程提供更好的支持和帮助,我们有大量数据的测试需求时,也不用再为创造数据而烦恼。

<em>
来源:https://www.cnblogs.com/ruipeng/p/18138134
免责声明:由于采集信息均来自互联网,如果侵犯了您的权益,请联系我们【E-Mail:cb@itdo.tech】 我们会及时删除侵权内容,谢谢合作!

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x

举报 回复 使用道具