Add-Ins Cho Excel - Tổng Hợp Dữ Liệu Sheet Và File

[ptm0412]

Tải File của @ongke0711 úp lên tôi chạy hết 91.344 giây ... ai rảnh thử nó với Power Query thuần của Ms tính thơi gian từ khi chọn file cho tới xong xem nó xử lý hết mấy giây ..... xin cảm ơn

Từ lúc chọn file đến khi đưaa xong xuống sheet: 59 giây, file 2020 02 Data, 800 ngàn dòng (Power query thuần)



Refresh 52 giây.

 

[Kiều Mạnh]

Từ lúc chọn file đến khi đưaa xong xuống sheet: 59 giây, file 2020 02 Data, 800 ngàn dòng (Power query thuần)

View attachment 284704

Refresh 52 giây.

chắc máy đó cấu hình mạnh hơn ... nói chung tùy máy

Em mới thử lại trên Máy của em vẫn là tầm 4 phút


Chờ cài hình sau tầm 2 phút

 

[ptm0412]

chắc máy đó cấu hình mạnh hơn ... nói chung tùy máy

Đúng rồi. Core i5 đời 11 (6 cores 12 threads), 2.60GHz, 16 Gb Ram.
Cũng file 800 ngàn dòng, nhưng không load xuống sheet mà chỉ create connection & load to Data Model: 40 giây. Refresh 36 giây



Tôi không có ý tranh đua tốc độ vì có máy mạnh máy yếu, chỉ muốn so sánh các phương thức của cùng 1 công cụ (cụ thể là power query):
- Load xuống sheet/ chỉ connect và Data model
- Nếu là folder: Lấy theo cách cơ bản của PQ và code M tự viết (ở bài #47)

 

[Kiều Mạnh]

Đúng rồi. Core i5 đời 11 (6 cores 12 threads), 2.60GHz, 16 Gb Ram.
Cũng file 800 ngàn dòng, nhưng không load xuống sheet mà chỉ create connection & load to Data Model: 40 giây. Refresh 36 giây

View attachment 284708

Tôi không có ý tranh đua tốc độ vì có máy mạnh máy yếu, chỉ muốn so sánh các phương thức của cùng 1 công cụ (cụ thể là power query):
- Load xuống sheet/ chỉ connect và Data model
- Nếu là folder: Lấy theo cách cơ bản của PQ và code M tự viết (ở bài #47)

1/ Phạm vi chủ đề này em lại ko quan tâm chuyện đó ... như em đã nói trước chỉ chọn file lấy dữ liệu gán lên sheet là xong ... còn sau đó như thế nào ... nó lại qua một chủ đề khác ta bàn tiếp .... với em tới đó xem như hoàn thành mục tiêu đề ra ( Áp dụng cho 1 File csv )

2/ Áp dụng cho List File trong Folder cũng như trên = hoàn thành mục tiêu đề ra .... còn lại sau đó em ko bàn nữa

Như mô tả bài số 1 chỉ phục vụ cái chung nhất mang tính đại chúng

Cảm ơn Anh

 

[befaint]

Cũng file 800 ngàn dòng, nhưng không load xuống sheet mà chỉ create connection & load to Data Model: 40 giây. Refresh 36 giây

(Em chỉ góp hình vui thôi anh nhé).

Python trên máy chip i7 đời 2015.

 

[ptm0412]

hoàn thành mục tiêu đề ra ....

Như mô tả bài số 1 chỉ phục vụ cái chung nhất mang tính đại chúng

Tôi tưởng mục tiêu đề ra là bao gồm cải thiện nhiều thứ, trong đó có tốc độ.

Ai có ý kiến thêm CSDL nào khác nữa không tôi xem xét nghiên cứu viết thêm nếu có thể ..........

File json đang hót á.

 

[Kiều Mạnh]

File json đang hót á.

Anh úp cho Em xin 1 file mẫu đơn giản nhất kiểu như 1 +1 = 2 thôi làm = PQ ... rảnh thong thả xem tiếp

Vì trên Delphi nó hổ trợ json rất tốt .... quan trọng là ta có biết viết hay ko thôi

còn tốc độ thực dụng code em viết nhanh gần gấp 3 lần rồi ... còn sau đó người dùng xử lý sao là quyền của họ tùy chỉnh tiếp = em ko quan tâm

 

[ptm0412]

(Em chỉ góp hình vui thôi anh nhé).

Xin lỗi chủ đề, chen ngang 1 cái:
Với PQ từ lúc chọn file cho đến khi nhìn thấy hình dưới đây chưa tới 1 giây, thời gian load to mới nhiều.

Bài đã được tự động gộp: 16/12/22

Anh úp cho Em xin 1 file mẫu đơn giản nhất kiểu như 1 +1 = 2 thôi làm = PQ ... rảnh thong thả xem tiếp

Có sẵn luôn nè:
Bài viết: Lấy dữ liệu từ json

Link tải file json file

 

[ongke0711]

(Em chỉ góp hình vui thôi anh nhé).

Python trên máy chip i7 đời 2015.

Đang tính đưa cái Python lên thì befaint góp vui trước rồi...hehe..

 

[befaint]

Với PQ từ lúc chọn file cho đến khi nhìn thấy hình dưới đây chưa tới 1 giây, thời gian load to mới nhiều.

Đây anh nhé .
.

 

[Kiều Mạnh]

chắc khi nào rảnh làm cái trình xem trước trên Delphi 800.000 x 48 cột chạy trên máy cùi bắp chỉ có 24.421 giây thôi còn máy ngon chắc trên 5 giây à

mấy ngày qua phá nát trên Form Delphi rùi

 

[ptm0412]

View attachment 284716

Đây anh nhé .

Đọc kỹ nhé: "Data Type base on 200 rows", không phải là review 200 rows. Mà thôi, chen ngang chủ đề người ta hoài

 

[befaint]

Đọc kỹ nhé: "Data Type base on 200 rows", không phải là review 200 rows. Mà thôi, chen ngang chủ đề người ta hoài

Em chụp hình phải căn chỉnh rất kỹ luôn đó anh.


Và anh nhìn kỹ thanh cuộn đứng (dọc) nhé.

 

[Kiều Mạnh]

ai code python xong úp cho Mạnh vọc chút xem tình hình sao he

 

[kelacloi]

Em chụp hình phải căn chỉnh rất kỹ luôn đó anh.
View attachment 284722

Và anh nhìn kỹ thanh cuộn đứng (dọc) nhé.

Nó chỉ là phần dùng để đoán định dạng, lấy 200 dòng làm mẫu thôi mà anh?
Anh cuộn xuống đọc dòng cuối cùng chưa anh?

 

[Kiều Mạnh]

Trong PQ cái hình sau cảm giác như cái trình xem trước CSDL với 2 cái COMbox tùy chỉnh chứ làm trò gì ta
à quên còn combox ngôn ngữ nữa

 

[Kiều Mạnh]

JSON trên Delphi hổ trợ quá tốt ... các đơn vị hàm dựng sẳn còn ta chỉ khai báo và sử dụng
Mò chút cơ bản nó cũng tạm Show ra

có điều cũng ko có gì phổ biến và nóng bỏng ở đây cả .... nên tới đó tạm dừng làm việc khác tốt hơn

1/ Xem Video sẽ thấy trên Tmeno là nó lấy các Cells trên File Excel tạo thành JSON
2/ Còn cái Msgbox là duyệt từng dòng JSON ............ vvv
.....
Viết thêm hàm lấy cái mục số 2 gán xuống Sheet là xong................. làm tới đó thôi vì trên này có ai dùng nó đâu mà làm

Liên kết: https://youtu.be/sUlc8lfh2SM

 

[Kiều Mạnh]

đã cập nhật hổ trợ lấy File *.csv úp lại File bài số 1



Dự án tiếp tục Fix lỗi và viết tiếp ... rất mong mọi ý kiến tham gia trong phạm vi mô tả bài số 1 ...

 

[Kiều Mạnh]

thong thả tôi sẽ viết thêm trình Builder SQL cho File *.CSV vào nữa ... vì trên thực tế có cột ko cần lấy mà cố lấy lên làm chi phí mất thời gian và góp phần tốn kém vô tích sự

 

[Kiều Mạnh]

cập nhật mới chi tiết mô tả + File úp bài số 1