正文 

当前位置： 首页 > 开发 > java教程

efcore从tph迁移到tpt(代码片段)

漫思 漫思     2023-04-04     232

关键词：

EF Core从TPH迁移到TPT

 

Intro#

EF Core支持多种方式处理具有继承关系的表，现在支持TPH、TPC（EF Core 7）、TPT，具体的实现方式可以参考官方文档和这篇文章。

大致总结一下不同的方式的区别：
TPH：所有的类型都放在一张表中，使用discriminator字段用以区别不同的类型
TPT：不同的子类型有单独的表存放子类独有的字段，父虚类型也有一张单独的表存放共有的字段。
TPC：不为父虚类新建表，只有子类型有单独的表，并且表内有父类和子类所有的字段。

由于TPT两张表的外键关联设计，在进行查询时，会自动进行的JOIN等连表查询操作，因此极限性能不太行。需要经常用查询父类的情况，TPH就挺好；需要经常查询子类的时候，TPC就非常适合。按照官方的说法，正常情况TPH就已经满足大多数的场景（这也是EF Core的默认设置），性能也是数一数二的，如果遇到了需要经常单独查询子类型的问题，可以优先考虑TPC，仅在一些特殊情况下应该考虑TPT。哪些是特殊情况？

请查阅官网这篇文章的详细讨论以了解三种不同方式对EF Core生成SQL的影响。

可能适合的场景#

我遇到的这么一个场景，有以下特点：

  • 子类非常多，并且不同的子类字段的区别也很大，使用TPH会使得这个表格的规格非常大，并且空字段非常多。
  • 继承的层级很短，只有一层继承关系。
  • 需要经常进行基于父类的查询，直接在一张表执行查询的效率要比在的TPC分布在不同表中查询的效率高。（注意，这里说的父类的查询是指直接使用Raw SQL的查询，使用EF Core在父类的查询会翻译成非常多的LEFT JOIN，导致性能低下。）

直接使用TPH或者使用TPC都不是非常满意，而TPT提供了一张父类的表存储公共的字段的这种方法，就显得非常适合。

注：TPC不符合数据库范式设计原则，TPH在空字段非常多的情况下也非常不优雅，强迫症可以使用TPT。

迁移#

如果是空表的话，直接使用EF Migration就可以了，麻烦的已经有既有数据的情况，由于数据表引用的对象从的总表转移到了子类表，因此直接执行的数据库迁移会提示违反了外键约束。

23503: insert or update on table "AD_AnimalCamera_Data" violates foreign key constraint "FK_AD_AnimalCamera_Data_AD_AnimalCamera_Infos_AttachDeviceId"

解决方案：

  1. 手动创建表，并将TPH表中的不同的子类型记录转移到不同的子类表中。
  2. 通过自编程序载入对象，进行持久化，然后清空所有表的数据，创建表，载入数据并通过EF Core插入。

由于数据量比较大，而且还有继承关系，手动去操作还是麻烦了一些，可以使用SQL查询进行简化；而第二个方案将由EF Core帮我们将数据插入到正确的位置。

方案1#

准备临时数据库#

将原来的数据库结构复制一份，并设置为开发环境。接下来修改数据库结构，TPH迁移到TPT模式，只需要在每一个子类表上使用[Table("")]标记就行了（当然也可以使用FluentAPI）。标记好了之后，使用EF Migration：

add-migration migrateTPT

由于是只有结构的空表，直接操作就可以成功了。

迁移数据到临时数据库#

将旧有数据传输到新的数据表中，尤其注意TPH与TPT之间表的在处理继承关系时的不同。

以AttachDeviceInfo为abstract类，AD_Insect_Info作为其中的一个子类

更新之后TPH表中的大量字段转移到了子类表中，因此可以使用数据库同步工具进行数据同步，忽略多余的字段就可以了。对于的TPT生成的子类表，通过Id字段与抽象类表进行匹配连接，因此需要手动插入对应类别的数据。

INSERT into "AD_Insect_Infos"
SELECT "Id",FALSE from "AttachDeviceInfos" WHERE "AttachDeviceTypeId" = 1

如果没有AttachDeviceTypeId字段，那么需要在TPH阶段先通过discriminator将不同子类区分开，这个会麻烦一点。

转移回数据库#

清空目标数据库（包括结构），并将临时数据库中的表同步到目标数据库中，手动调整_EFMigration表格的记录（指向最新版本），完成切换。

方案2#

备份数据#

在数据库还是原来结构的情况下，我们需要将现有的数据进行序列化，之前我写过一篇序列化文章，使用的是PROTOBUF序列化。这里由于传输的数据结构比较简单，可以使用System.Text.Json类库Json序列化到文件。

对于有继承关系的表的序列化，.NET 7的System.Text.Json新增了对应的支持，可以参考文档的相关实现。

准备临时数据库#

将原来的数据库结构复制一份，并设置为开发环境。接下来修改数据库结构，TPH迁移到TPT模式，只需要在每一个子类表上使用[Table("")]标记就行了（当然也可以使用FluentAPI）。标记好了之后，使用EF Migration：

add-migration migrateTPT

由于是只有结构的空表，直接操作就可以成功了。

迁移数据到临时数据库#

由于临时数据库结构已经和既有数据库不同，无法通过程序直接连接两个数据库进行数据导入的操作，因此需要将数据反序列化到的新的数据库。

转移回数据库#

清空目标数据库（包括结构），并将临时数据库中的表同步到目标数据库中，手动调整_EFMigration表格的记录（指向最新版本），完成切换。

总结#

迁移到TPT时，可以使用临时数据库中转，将数据库的数据以新的结构存储下来，然后再同步到新数据库。当然也可以直接在正式数据库中操作：直接持久化，清空数据，然后再还原数据。当然这么风险更高，强调一点，在生产的数据库中进行操作需要格外谨慎，务必做好备份。

可以发现，在数据库中使用外键约束时，虽然给基于导航属性的应用（例如OData）提供了便利，同时将数据完整性检查后置到了数据库中；但是进行架构调整是一件比较麻烦的工作，对分布式应用也非常不友好。

P.S. TPT的查询性能很差，因此绝大多数场景都不推荐，仅在自己完全清楚并权衡了利弊的情况下再使用TPT。

作者：波多尔斯基

出处：https://www.cnblogs.com/podolski/p/17284449.html

版权：本作品采用「署名-非商业性使用-相同方式共享 4.0 国际」许可协议进行许可。

欢迎转载，转载请保留原文链接~喜欢的观众老爷们可以点下推荐或者右下角关注不迷路~

EF Core 5 TPT 和身份 (CRUD)

】EFCore5TPT和身份(CRUD)【英文标题】：EFCore5TPTandIdentity(CRUD)【发布时间】：2021-03-2514:13:22【问题描述】：我想使用EFCore的TPT功能，我想将它与Identity集成，但我在添加到数据库时遇到了一些问题。publicclassApplicationUser:IdentityUser<Gu... 查看详情

efcore迁移命令移除外键(代码片段)

 继承MigrationsModelDiffer，重载GetDifferences并移除ForeignKeys[System.Diagnostics.CodeAnalysis.SuppressMessage("Usage","EF1001:InternalEFCoreAPIusage.",Justification="<挂起>")]publicclassMigrationsM 查看详情

Entity Framework 4.3 - TPH 映射和迁移错误

】EntityFramework4.3-TPH映射和迁移错误【英文标题】：EntityFramework4.3-TPHmappingandmigrationerror【发布时间】：2012-03-1823:21:28【问题描述】：我正在使用EntityFramework4.3代码优先和手动迁移。我正在尝试映射使用两个自定义鉴别器字段的TPH... 查看详情

从 EF Core 5 迁移到 EF Core 6 时出错

】从EFCore5迁移到EFCore6时出错【英文标题】：ErroronmigratingfromEFCore5toEFCore6【发布时间】：2022-01-1507:19:18【问题描述】：从EFCore5迁移到EFCore6后，我的数据库模型出现问题。在创建上下文时出现错误：字典中不存在给定的键。示例... 查看详情

.net下极限生产力之efcore分表分库全自动化迁移codefirst(代码片段)

...了如何兼容WTM框架后也有不少小伙伴来问我如何兼容如何迁移等问题,经过这么多框架的兼容我自己也认识到了一些问题,譬如在ShardingCore初始化前使用(毕竟efcore)的初始化是在依赖注入的时候不需要手动调用初始化&# 查看详情

inheritancewithefcodefirst:part2–tablepertype(tpt)

Intheprevious blogpost yousawthattherearethreedifferentapproachestorepresentinganinheritancehierarchyandIexplainedTableperHierarchy(TPH)asthedefaultmappingstrategyinEFCodeFirst.Wearguedthatt 查看详情

efcore迁移

Efcore迁移Add-MigrationXX：1、根据模型的实际结构对比当前快照，从而生成新迁移文件的Up和Down方法2、根据模型的实际结构修改快照和新迁移文件-----------------Remove-Migration一、我们定义：1、最后一次的迁移文件，称为：A2、倒数第... 查看详情

EF Core 5 TPT - 具有不同 ID 名称的继承对象

】EFCore5TPT-具有不同ID名称的继承对象【英文标题】：EFCore5TPT-InheritedobjectwithdifferentIDname【发布时间】：2021-07-2719:50:19【问题描述】：通常应用程序是由ID字段构成的，只是在数据库中将其命名为“ID”。但是在我工作的应用程序... 查看详情

efcore迁移过程遇到efcoretoolsversion版本不相符的解决方案(代码片段)

如果你使用命令：PM>add-migrationInital提示如下信息时：TheEFCoretoolsversion‘2.1.1-rtm-30846‘isolderthanthatoftheruntime‘2.1.4-rtm-31024‘解决方法大致一下几种：第一最近在跟着官方的文档学习.NETCore。在写“创建Razor页面Web应用”Demo... 查看详情

从 EF6 迁移到 EF Core 2.0

】从EF6迁移到EFCore2.0【英文标题】：MovingfromEF6toEFCore2.0【发布时间】：2018-08-1506:53:10【问题描述】：我刚开始将使用EF6x的MVC5项目迁移到MVCCore和EFCore，但我的实体配置存在很大问题。如何将EF6Fluent配置迁移到EF核心？如果可能的... 查看详情

sh从svn迁移到git(代码片段)

查看详情

sh从github迁移到awscodecommit(代码片段)

查看详情

text如何从runcloud迁移到wordops(代码片段)

查看详情

将构建配置从groovy迁移到kts(代码片段)

将构建配置从Groovy迁移到KTS文章目录将构建配置从Groovy迁移到KTS前言Groovy和KTS对比优点:缺点和已知问题：Android构建配置从Groovy迁移KTS准备工作脚本文件名一次迁移一个文件自定义Task使用`plugins`代码块依赖管理构建变... 查看详情

markdownlaravel5.4：从gulp迁移到webpack(代码片段)

查看详情

tensorflow从1到2（十三）图片风格迁移(代码片段)

风格迁移《从锅炉工到AI专家(8)》中我们介绍了一个“图片风格迁移”的例子。因为所引用的作品中使用了TensorFlow1.x的代码，算法也相对复杂，所以文中没有仔细介绍风格迁移的原理。今天在TensorFlow2.0的帮助，和新算法思想的... 查看详情

数据库迁移系列从oracle迁移到opengauss实战分享(代码片段)

之前的迁移系列中我们介绍了Mysql到openGauss的迁移方法，本篇介绍使用Ora2og工具从Oracle到openGauss数据库的迁移。文章目录简介迁移前准备环境软件安装ora2og工具安装创建迁移项目配置ora2pg.conf测试迁移导出导入Ora2Pg不足FAQ简介... 查看详情

csharp从301urltracker迁移到skybrud.umbraco.redirects(代码片段)

查看详情