🥇Lafiny sasany amin'ny fanatsarana ny fangatahana LINQ amin'ny C#.NET ho an'ny MS SQL Server

Niditra .NET ho fiteny fanodikodinana angona vaovao mahery vaika ny LINQ. Ny LINQ mankany SQL amin'ny maha-ampahany azy dia ahafahanao mifandray tsara amin'ny DBMS mampiasa, ohatra, Entity Framework. Na izany aza, amin'ny fampiasana azy matetika dia hadinon'ny mpamorona ny mijery ny karazana fangatahana SQL izay havoakan'ny mpanome fangatahana fanontaniana, raha ny momba anao Entity Framework, no hamokatra.

Andeha isika hijery hevi-dehibe roa mampiasa ohatra.
Mba hanaovana izany, mamorona angon-drakitra Test ao amin'ny SQL Server, ary mamorona tabilao roa ao anatiny amin'ny fampiasana ity fanontaniana manaraka ity:

Famoronana tabilao

USE [TEST]
GO

SET ANSI_NULLS ON
GO

SET QUOTED_IDENTIFIER ON
GO

CREATE TABLE [dbo].[Ref](
	[ID] [int] NOT NULL,
	[ID2] [int] NOT NULL,
	[Name] [nvarchar](255) NOT NULL,
	[InsertUTCDate] [datetime] NOT NULL,
 CONSTRAINT [PK_Ref] PRIMARY KEY CLUSTERED 
(
	[ID] ASC
)WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, IGNORE_DUP_KEY = OFF, ALLOW_ROW_LOCKS = ON, ALLOW_PAGE_LOCKS = ON) ON [PRIMARY]
) ON [PRIMARY]
GO

ALTER TABLE [dbo].[Ref] ADD  CONSTRAINT [DF_Ref_InsertUTCDate]  DEFAULT (getutcdate()) FOR [InsertUTCDate]
GO

USE [TEST]
GO

SET ANSI_NULLS ON
GO

SET QUOTED_IDENTIFIER ON
GO

CREATE TABLE [dbo].[Customer](
	[ID] [int] NOT NULL,
	[Name] [nvarchar](255) NOT NULL,
	[Ref_ID] [int] NOT NULL,
	[InsertUTCDate] [datetime] NOT NULL,
	[Ref_ID2] [int] NOT NULL,
 CONSTRAINT [PK_Customer] PRIMARY KEY CLUSTERED 
(
	[ID] ASC
)WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, IGNORE_DUP_KEY = OFF, ALLOW_ROW_LOCKS = ON, ALLOW_PAGE_LOCKS = ON) ON [PRIMARY]
) ON [PRIMARY]
GO

ALTER TABLE [dbo].[Customer] ADD  CONSTRAINT [DF_Customer_Ref_ID]  DEFAULT ((0)) FOR [Ref_ID]
GO

ALTER TABLE [dbo].[Customer] ADD  CONSTRAINT [DF_Customer_InsertUTCDate]  DEFAULT (getutcdate()) FOR [InsertUTCDate]
GO

Andeha isika hameno ny latabatra Ref amin'ny alàlan'ny fampandehanana ity script manaraka ity:

Famenoana ny latabatra Ref

USE [TEST]
GO

DECLARE @ind INT=1;

WHILE(@ind<1200000)
BEGIN
	INSERT INTO [dbo].[Ref]
           ([ID]
           ,[ID2]
           ,[Name])
    SELECT
           @ind
           ,@ind
           ,CAST(@ind AS NVARCHAR(255));

	SET @ind=@ind+1;
END 
GO

Andeha hofenointsika toy izany koa ny latabatra mpanjifa amin'ny fampiasana ity script manaraka ity:

Mameno ny latabatra mpanjifa

USE [TEST]
GO

DECLARE @ind INT=1;
DECLARE @ind_ref INT=1;

WHILE(@ind<=12000000)
BEGIN
	IF(@ind%3=0) SET @ind_ref=1;
	ELSE IF (@ind%5=0) SET @ind_ref=2;
	ELSE IF (@ind%7=0) SET @ind_ref=3;
	ELSE IF (@ind%11=0) SET @ind_ref=4;
	ELSE IF (@ind%13=0) SET @ind_ref=5;
	ELSE IF (@ind%17=0) SET @ind_ref=6;
	ELSE IF (@ind%19=0) SET @ind_ref=7;
	ELSE IF (@ind%23=0) SET @ind_ref=8;
	ELSE IF (@ind%29=0) SET @ind_ref=9;
	ELSE IF (@ind%31=0) SET @ind_ref=10;
	ELSE IF (@ind%37=0) SET @ind_ref=11;
	ELSE SET @ind_ref=@ind%1190000;
	
	INSERT INTO [dbo].[Customer]
	           ([ID]
	           ,[Name]
	           ,[Ref_ID]
	           ,[Ref_ID2])
	     SELECT
	           @ind,
	           CAST(@ind AS NVARCHAR(255)),
	           @ind_ref,
	           @ind_ref;


	SET @ind=@ind+1;
END
GO

Noho izany, nahazo latabatra roa izahay, ny iray manana andalana maherin'ny 1 tapitrisa, ary ny iray kosa manana andalana maherin'ny 10 tapitrisa.

Ao amin'ny Visual Studio izao dia mila mamorona tetikasa Visual C# Console App (.NET Framework) ianao:

Manaraka, mila manampy tranomboky ho an'ny Entity Framework ianao hifaneraserana amin'ny angon-drakitra.
Mba hanampiana azy, tsindrio havanana amin'ny tetikasa ary mifidiana Manage NuGet Packages amin'ny menu context:

Avy eo, ao amin'ny varavarankely fitantanana fonosana NuGet izay miseho, ampidiro ny teny hoe "Entity Framework" ao amin'ny varavarankely fikarohana ary safidio ny fonosana Entity Framework ary apetraho izany:

Manaraka, ao amin'ny fisie App.config, aorian'ny fanakatonana ny singa configSections, dia mila manampy ity sakana manaraka ity ianao:

<connectionStrings>
    <add name="DBConnection" connectionString="data source=ИМЯ_ЭКЗЕМПЛЯРА_MSSQL;Initial Catalog=TEST;Integrated Security=True;" providerName="System.Data.SqlClient" />
</connectionStrings>

Amin'ny connectionString dia mila miditra ny tady fifandraisana ianao.

Andeha isika hamorona interface 3 amin'ny rakitra samihafa:

Mampihatra ny interface IBaseEntityID

namespace TestLINQ
{
    public interface IBaseEntityID
    {
        int ID { get; set; }
    }
}

Fampiharana ny interface IBaseEntityName

namespace TestLINQ
{
    public interface IBaseEntityName
    {
        string Name { get; set; }
    }
}

Fampiharana ny interface IBaseNameInsertUTCDate

namespace TestLINQ
{
    public interface IBaseNameInsertUTCDate
    {
        DateTime InsertUTCDate { get; set; }
    }
}

Ary amin'ny rakitra misaraka dia hamorona BaseEntity kilasy fototra ho an'ny sampana roa izahay, izay ahitana saha iraisana:

Fampiharana ny kilasy fototra BaseEntity

namespace TestLINQ
{
    public class BaseEntity : IBaseEntityID, IBaseEntityName, IBaseNameInsertUTCDate
    {
        public int ID { get; set; }
        public string Name { get; set; }
        public DateTime InsertUTCDate { get; set; }
    }
}

Manaraka, hamorona ny entintsika roa amin'ny rakitra misaraka isika:

Fampiharana ny kilasy Ref

using System.ComponentModel.DataAnnotations.Schema;

namespace TestLINQ
{
    [Table("Ref")]
    public class Ref : BaseEntity
    {
        public int ID2 { get; set; }
    }
}

Fampiharana ny kilasin'ny mpanjifa

using System.ComponentModel.DataAnnotations.Schema;

namespace TestLINQ
{
    [Table("Customer")]
    public class Customer: BaseEntity
    {
        public int Ref_ID { get; set; }
        public int Ref_ID2 { get; set; }
    }
}

Andeha isika hamorona contexte UserContext amin'ny rakitra misaraka:

Fampiharana ny kilasy UserContex

using System.Data.Entity;

namespace TestLINQ
{
    public class UserContext : DbContext
    {
        public UserContext()
            : base("DbConnection")
        {
            Database.SetInitializer<UserContext>(null);
        }

        public DbSet<Customer> Customer { get; set; }
        public DbSet<Ref> Ref { get; set; }
    }
}

Nahazo vahaolana efa vita izahay amin'ny fanaovana andrana fanatsarana miaraka amin'ny LINQ mankany SQL amin'ny alàlan'ny EF ho an'ny MS SQL Server:

Ampidiro ao amin'ny rakitra Program.cs izao kaody manaraka izao:

File program.cs

using System;
using System.Collections.Generic;
using System.Linq;

namespace TestLINQ
{
    class Program
    {
        static void Main(string[] args)
        {
            using (UserContext db = new UserContext())
            {
                var dblog = new List<string>();
                db.Database.Log = dblog.Add;

                var query = from e1 in db.Customer
                            from e2 in db.Ref
                            where (e1.Ref_ID == e2.ID)
                                 && (e1.Ref_ID2 == e2.ID2)
                            select new { Data1 = e1.Name, Data2 = e2.Name };

                var result = query.Take(1000).ToList();

                Console.WriteLine(dblog[1]);

                Console.ReadKey();
            }
        }
    }
}

Manaraka, andao hanomboka ny tetikasantsika.

Amin'ny fiafaran'ny asa dia hiseho amin'ny console ireto manaraka ireto:

Namorona SQL Query

SELECT TOP (1000) 
    [Extent1].[Ref_ID] AS [Ref_ID], 
    [Extent1].[Name] AS [Name], 
    [Extent2].[Name] AS [Name1]
    FROM  [dbo].[Customer] AS [Extent1]
    INNER JOIN [dbo].[Ref] AS [Extent2] ON ([Extent1].[Ref_ID] = [Extent2].[ID]) AND ([Extent1].[Ref_ID2] = [Extent2].[ID2])

Izany hoe, amin'ny ankapobeny, ny fangatahana LINQ dia niteraka fangatahana SQL ho an'ny MS SQL Server DBMS tsara.

Andeha isika hanova ny fepetra AND ho OR amin'ny fangatahana LINQ:

Fanontaniana LINQ

var query = from e1 in db.Customer
                            from e2 in db.Ref
                            where (e1.Ref_ID == e2.ID)
                                || (e1.Ref_ID2 == e2.ID2)
                            select new { Data1 = e1.Name, Data2 = e2.Name };

Ary andao hanomboka indray ny fampiharana.

Ny famonoana dia hianjera miaraka amin'ny hadisoana noho ny fotoana famonoana baiko mihoatra ny 30 segondra:

Raha mijery ny fangatahana novokarin'ny LINQ ianao:

, dia azonao antoka fa ny fifantenana dia mitranga amin'ny alàlan'ny vokatra Cartesian amin'ny andiany roa (tabilao):

Namorona SQL Query

SELECT TOP (1000) 
    [Extent1].[Ref_ID] AS [Ref_ID], 
    [Extent1].[Name] AS [Name], 
    [Extent2].[Name] AS [Name1]
    FROM  [dbo].[Customer] AS [Extent1]
    CROSS JOIN [dbo].[Ref] AS [Extent2]
    WHERE [Extent1].[Ref_ID] = [Extent2].[ID] OR [Extent1].[Ref_ID2] = [Extent2].[ID2]

Andao averina soratana ny fangatahana LINQ toy izao manaraka izao:

Optimized LINQ fanontaniana

var query = (from e1 in db.Customer
                   join e2 in db.Ref
                   on e1.Ref_ID equals e2.ID
                   select new { Data1 = e1.Name, Data2 = e2.Name }).Union(
                        from e1 in db.Customer
                        join e2 in db.Ref
                        on e1.Ref_ID2 equals e2.ID2
                        select new { Data1 = e1.Name, Data2 = e2.Name });

Avy eo dia mahazo ity fangatahana SQL manaraka ity izahay:

SQL fanontaniana

SELECT 
    [Limit1].[C1] AS [C1], 
    [Limit1].[C2] AS [C2], 
    [Limit1].[C3] AS [C3]
    FROM ( SELECT DISTINCT TOP (1000) 
        [UnionAll1].[C1] AS [C1], 
        [UnionAll1].[Name] AS [C2], 
        [UnionAll1].[Name1] AS [C3]
        FROM  (SELECT 
            1 AS [C1], 
            [Extent1].[Name] AS [Name], 
            [Extent2].[Name] AS [Name1]
            FROM  [dbo].[Customer] AS [Extent1]
            INNER JOIN [dbo].[Ref] AS [Extent2] ON [Extent1].[Ref_ID] = [Extent2].[ID]
        UNION ALL
            SELECT 
            1 AS [C1], 
            [Extent3].[Name] AS [Name], 
            [Extent4].[Name] AS [Name1]
            FROM  [dbo].[Customer] AS [Extent3]
            INNER JOIN [dbo].[Ref] AS [Extent4] ON [Extent3].[Ref_ID2] = [Extent4].[ID2]) AS [UnionAll1]
    )  AS [Limit1]

Indrisy, amin'ny fangatahana LINQ dia tsy misy afa-tsy fepetra iray ihany, noho izany dia azo atao ny manao fangatahana mitovy amin'ny fampiasana fanontaniana roa ho an'ny fepetra tsirairay ary avy eo manambatra azy ireo amin'ny Union mba hanesorana ireo dika mitovy amin'ireo andalana.
Eny, ny fanontaniana dia tsy mitovy amin'ny ankapobeny, amin'ny fiheverana fa mety haverina ny andalana feno dika mitovy. Na izany aza, amin'ny tena fiainana dia tsy ilaina ny andalana dika mitovy tanteraka ary miezaka ny manala azy ireo ny olona.

Andeha isika hampitaha ny drafitra fanatanterahana ireto fanontaniana roa ireto:

ho an'ny CROSS JOIN ny salan'ny fotoana famonoana dia 195 segondra:
ho an'ny INNER JOIN-UNION ny salan'isan'ny fotoana famonoana dia latsaky ny 24 segondra:

Как видно из результатов, для двух таблиц с миллионами записей оптимизированный LINQ-запрос работает в разы быстрее, чем неоптимизированный.

Для варианта с И в условиях LINQ-запрос вида:

Fanontaniana LINQ

var query = from e1 in db.Customer
                            from e2 in db.Ref
                            where (e1.Ref_ID == e2.ID)
                                 && (e1.Ref_ID2 == e2.ID2)
                            select new { Data1 = e1.Name, Data2 = e2.Name };

почти всегда будет сгенерирован правильный SQL-запрос, который будет выполняться в среднем примерно 1 сек:

Также для манипуляций LINQ to Objects вместо запроса вида:

LINQ-запрос (1-й вариант)

var query = from e1 in seq1
                            from e2 in seq2
                            where (e1.Key1==e2.Key1)
                               && (e1.Key2==e2.Key2)
                            select new { Data1 = e1.Data, Data2 = e2.Data };

можно использовать запрос вида:

LINQ-запрос (2-й вариант)

var query = from e1 in seq1
                            join e2 in seq2
                            on new { e1.Key1, e1.Key2 } equals new { e2.Key1, e2.Key2 }
                            select new { Data1 = e1.Data, Data2 = e2.Data };

izay:

Определение двух массивов

Para[] seq1 = new[] { new Para { Key1 = 1, Key2 = 2, Data = "777" }, new Para { Key1 = 2, Key2 = 3, Data = "888" }, new Para { Key1 = 3, Key2 = 4, Data = "999" } };
Para[] seq2 = new[] { new Para { Key1 = 1, Key2 = 2, Data = "777" }, new Para { Key1 = 2, Key2 = 3, Data = "888" }, new Para { Key1 = 3, Key2 = 5, Data = "999" } };

, а тип Para определяется следующим образом:

Определение типа Para

class Para
{
        public int Key1, Key2;
        public string Data;
}

Таким образом мы рассмотрели некоторые аспекты в оптимизации LINQ-запросов к MS SQL Server.

К сожалению даже опытные и ведущие .NET-разработчики забывают о том, что необходимо понимать что делают за кадром те инструкции, которые они используют. Иначе они становятся конфигураторами и могут заложить бомбу замедленного действия в будущем как при масштабировании программного решения, так и при незначительных изменениях внешних условий среды.

Также небольшой обзор проводился и eto.

Исходники для теста-сам проект, создание таблиц в базе данных TEST, а также наполнение данными этих таблиц находится eto.
Ao amin'ity tahiry ity ihany koa, ao amin'ny lahatahiry Plans, misy drafitra amin'ny fanatanterahana fanontaniana miaraka amin'ny fepetra OR.

Source: www.habr.com

Ny lafiny sasany amin'ny fanatsarana ny fangatahana LINQ ao amin'ny C#.NET ho an'ny MS SQL Server

Add a comment cancel reply