เพิ่มข้อมูลทีละมากๆ ใน database mdb โดยดึงข้อมูลจากไฟล์ lyr แต่ละไฟล์
ผมเขียนโปรแกรมลบเพลงซ้ำใน karaoke โดยจัดเก็บฐานข้อมูลคนร้อง + ชื่อเพลง และ ชื่อ พาทไว้เอามาลง datagrid แล้วใช้ timer ในการลบไฟล์ซ้ำปรากฎว่าช้ามากเลยครับ 2 แสนกว่าเพลง นำไฟล์เข้า 7 ชั่วโมง ลบไฟล์ 2 ชั่วโมง
อยากทราบว่ามีวิธีนำข้อมูลเข้าเร็วกว่านี้ไม๊ครับ
ตัวอย่าโค๊ดครับ
Code (C#)
//สร้าง list file .lyr
public static System.Collections.Generic.List<string> GetFilesRecursive(string initial)
{
System.Collections.Generic.List<string> result = new System.Collections.Generic.List<string>();
System.Collections.Generic.Stack<string> stack = new System.Collections.Generic.Stack<string>();
stack.Push(initial);
while ((stack.Count > 0))
{
string dir = stack.Pop();
result.AddRange(System.IO.Directory.GetFiles(dir, "*.lyr"));
string directoryName = null;
foreach (string directoryName_loopVariable in System.IO.Directory.GetDirectories(dir))
{
directoryName = directoryName_loopVariable;
stack.Push(directoryName);
}
}
return result;
}
//ส่งกลับชื่อคนร้อง กะชื่อเพลง
public static string _ArtisSong (string pathFileName)
{
Random rnd = new Random();
//เมื่อเกิดข้อผิดพลาดให้ส่งกลับชื่อ แบบ random ออกไปเพื่อจะไม่ถือว่าเป็นเพลงซ้ำ
string result = "" + rnd.Next(1, 99999) + rnd.Next(1, 99999) + rnd.Next(1, 99999) + rnd.Next(1, 99999) + rnd.Next(1, 99999) + rnd.Next(1, 99999) + rnd.Next(1, 99999) + rnd.Next(1, 99999);
try
{
result = (string)System.IO.File.ReadLines(pathFileName, System.Text.Encoding.GetEncoding(874)).Skip(1).Take(1).First() + " ; " + (string)System.IO.File.ReadLines(pathFileName, System.Text.Encoding.GetEncoding(874)).Skip(0).Take(1).First(); ;
}
catch { }
return result;
}
//เพิ่มข้อมูลเข้า database mdb
private void timer1_Tick(object sender, EventArgs e)
{
if (i >= _file.Count)
{
timer1.Enabled = false;
songTableAdapter.Fill(dataDataSet.Song);
label1.Text = "";
c = songDataGridView.RowCount - 1;
i = 0;
idel = 0;
timer2.Enabled = true;
t = 0; timer3.Enabled = true;
Cursor = Cursors.Default;
return;
}
label1.Text = i + "/" + _file.Count + "File;" + _file[i] + " Song;" + Program._ArtisSong(_file[i]) ;
songTableAdapter.Insert(_file[i], Program._ArtisSong(_file[i]));
i++;
}
//ลบไฟล์ซ้ำโดยอ้างอิง Datagrid แต่ละแถว
private void timer2_Tick(object sender, EventArgs e)
{
if (i >= songDataGridView.RowCount - 1) { timer3.Enabled = false; timer2.Enabled = false; Cursor = Cursors.Default; if (checkBox1.Checked == true) { Process.Start("shutdown", "/s /t 0"); } return; }
if (songDataGridView[0, i].Value.ToString().Replace(" ","").ToUpper() == cri)
{
idel++;
DelFile(songDataGridView[1, i].Value.ToString());
DelFile(songDataGridView[1, i].Value.ToString().ToUpper().Replace("\\NCN\\LYRICS\\", "\\NCN\\CURSOR\\").Replace(".LYR", ".CUR"));
DelFile(songDataGridView[1, i].Value.ToString().ToUpper().Replace("\\NCN\\LYRICS\\", "\\NCN\\SONG\\").Replace(".LYR", ".MID"));
}
else
{ cri = songDataGridView[0, i].Value.ToString().Replace(" ", "").ToUpper(); }
Text = "Files;" + i + "/" + (songDataGridView.RowCount - 1) + " Delete Files:" + idel + " Check:" + cri ;
label1.Text = "Check:" + cri + " file:" + songDataGridView[1, i].Value.ToString();
i++;
}
Tag : .NET, Ms Access, Win (Windows App), C#, Windows
Date :
2014-08-05 13:33:13
By :
lamaka.tor
View :
1476
Reply :
8
ไม่มีใครตอบเลยเรอะคร้าบ
Date :
2014-08-06 08:35:30
By :
lamaka.tor
ลองดู SqlBulkCopy ครับ สามารถเอาพวก DataSet ลงทีล่ะเยอะ ๆ ได้ครับ
Date :
2014-08-06 08:41:54
By :
mr.win
ลองเขียนโปรแกรมโดยลดการใช้ คอมโปเน้นน์การ Display ลงครับ
ใช้ dataset โดยตรง ครับ response แค่จำนวนเรคคอร์ดที่ทำงาน
datagrid มันใช้ resource และ event เยอะ ครับ ใช้เวลาการทำงานมาก
เอา datagrid ออก ผมว่าน่าจะเร็วขึ้นนะครับ
ปล. ขณะนำข้อมูลเข้า เอา index ทุกอันออกครับ เหลือไว้แต่ id primary autoincrement
ให้มันเข้าไปตรงๆ ไม่ต้องทำ index
แล้วค่อย คิวรี่ ลบ ข้อมูลซ้ำ
Code (SQL)
ALTER TABLE testing ADD `del` INT NOT NULL ; # สร้าง temp field for delete
Code (SQL)
update (select max(id) mid, count(id) cid from testing group by `field ที่ต้องตรวจสอบ` having cid>1) as tb1
left join testing as tb2 on tb1.mid=tb2.id set tb2.del=1;
Code (SQL)
delete from testing where del = 1;
Code (SQL)
ALTER TABLE testing DROP `del` ; # ไม่อยากลบ field นี้ จะเก็บเอาไว้ ก็เอาบันทัดนี้ออก
ที่ให้ ทำ หลายช๊อต เพราะต้องการ ให้ตรวจสอบก่อน ที่ละขั้นตอน
ถ้าถูกต้องแล้ว ค่อยจับรวมเป็น statement เดียว
ประวัติการแก้ไข 2014-08-06 09:51:56 2014-08-06 10:01:52
Date :
2014-08-06 09:17:06
By :
Chaidhanan
ขอบคุณทุกท่านคร้าบ จะพยายามทำดู
ไม่ได้จบทางด้านโปรแกรมเมอร์มาครับ
Date :
2014-08-06 11:42:22
By :
lamaka.tor
ผมได้เปรียบคุณตรงที่ผมเชี่ยวชาญ Dbase/RDBMS เป็นอย่างดี
คุณได้เปรียบผมตรงที่คุณเชี่ยวชาญ C# เป็นอย่างดี (จริงหรือเปล่า)
Date :
2014-08-10 11:52:08
By :
หน้าฮี
วัดกันสู้กันด้วยตรรกะ (Algorithm) โดยที่ผู้แพ้คือผู้ชนะ
ผมมั่นใจว่าผมจะไม่มีวันชนะคุณได้ครับ (วัดกันที่ตรรกะ)
ปล. อะไรจะสุขไปยิ่งกว่าสิ่งที่เราไม่เคยรู้ (ผม/คุณ)
ประวัติการแก้ไข 2014-08-10 11:58:56 2014-08-10 12:00:03
Date :
2014-08-10 11:57:43
By :
หน้าฮี
Load balance : Server 01