Power Query là công cụ được phát triển bởi hãng Microsoft có tích hợp từ Excel 2013 và tích hợp sẵn trên Power BI. Các tính năng của Power Query trên Excel và trên Power BI là tương tự nhau đến 95%:
Quá trình xử lý để chuẩn hóa dữ liệu (giai đoạn ETL) là công đoạn nhọc nhằn khoai và rắc rối khi làm phân tích dữ liệu. Power Query ra đời có thể 1 bước tiến lớn của nhân loại – 1 công cụ thần kỳ – là phao cứu sinh cho rất nhiều nhà quản lý, các bạn làm báo cáo không chuyên IT, đặc biệt dành cho nhiều bạn xuất thân là dân kinh tế không không biết lập trình để có thể xử lý và làm sạch dữ liệu cho quá trình lên Dashboard.
Quay trở về thời kỳ trước khi có Power Query: Khi muốn xử lý các dữ liệu thô, những ai biết về VBA sẽ sử dụng để xử lý các dữ liệu, hoặc thông thường phần đa mọi người sẽ dùng các hàm Excel thông thường như – Left, Right,… để trích xuất hay chia tách dữ liệu,… VBA thì cần kiến thức lập trình, nhiều người không đủ kiên nhẫn để học được mặc dù rất hiệu dụng. Excel thì khi có Data mới cập nhật sẽ không lưu tự động được, và thao tác thủ công khá nhiều dẫn đến các file xử lý lớn khiến người dùng đau đầu mất kiên nhẫn => Power Query là công cụ toàn năng tuyệt vời nhất giúp bạn có thể xử lý đống dữ liệu thô rác một cách nhanh, mạnh mẽ và dễ sử dụng.
Như đã viết ở trên Power query ra đời chính với mục đích là xử lý dữ liệu – Đây là công đoạn chuẩn hóa trước khi đưa dữ liệu vào kho nhằm phục vụ mục đích làm Dashboard các chức năng chính của nó gồm:
Lấy dữ liệu từ nhiều nơi, nhiều nguồn khác nhau từ file, database hoặc các Other source: web page, file Exce, file CSV, text file, SQL server database, Microsoft Azure SQL Database, MySQL database, Sharepoint list,…
– Là tính năng thường sử dụng nhiều nhất của quá trình phân tích dữ liệu, phần này nếu bạn dùng Excel chắc hẳn bạn sẽ biết rất mệt mỏi nhường nào với các công việc thường làm: xóa dòng/cột trống hoặc không cần thiết, filter dữ liệu, chỉnh sửa dữ liệu để có thể sử dụng Pivot Table, gộp hoặc tách nhiểu cột, find & replace dữ liệu,…
– Nay với Power Query bạn đã có những tool thay thế: Chọn, Giữ, Thêm, Xoay, Phóng to – Thu nhỏ, Join (gia nhập), Bổ sung và chuyển đổi định dạng:
Một số bài toán sẽ xử lý trong Power Query
Bài toán 1: Thống kê doanh thu từng chi nhánh theo từng tháng 1
Bài toán 2: Thống kê doanh thu từng chi nhánh theo từng quý và từng tháng
Công đoạn sau khi dữ liệu đã được chuẩn hóa sẽ đưa vào kho dữ liệu (Data Model) nhằm phục vụ trình bày báo cáo.
Trên đây mình đã giới thiệu đến mọi người về Power Query, tính năng và sự ưu việt của nó cho việc xử lý và chuẩn hóa dữ liệu. Để có thể hiểu rõ hơn và có thể sử dụng Power Query một cách hoàn chỉnh cho cả quá trình làm phân tích dữ liệu, mời bạn tham khảo 2 khóa học của Cole dưới đây để thành thục kỹ năng Power Query nhé:
https://phantichdulieu.cole.vn/ – Ứng dụng Power Query phân tích dữ liệu trên Excel
http://powerbi.cole.vn/ – Ứng dụng Power Query phân tích dữ liệu với Power BI
Regards!
Cảm nhận học viên
Chủ tịch Meeyland Group – Học viên khóa học chuyển đổi số doanh nghiệp, khóa học phân tích dữ liệu
Chuyển đổi số là xu thế và xu hướng của bất cứ doanh nghiệp nào hiện nay. Là doanh nghiệp về công nghệ, tuy nhiên về phần số hóa quy trình bên mình còn yếu, mình tham gia để hiểu cách làm Data Warehouse trong doanh nghiệp
Sinh viên ngành Logistics – Học viên khóa phân tích dữ liệu với R, khóa chuyển đổi số doanh nghiệp, khóa Data Engineer
Em hiện tại đang là sinh viên ngành logictics, tuy nhiên câu chuyện số hóa được ứng dụng ở bất cứ đâu không chỉ ở tại trường, Em đăng ký học để học thêm kỹ năng cho công việc sau này của mình.
Chairman Sunflower Tekondo – Học viên khóa chuyển đổi số doanh nghiệp, khóa Data Engineer, khóa power BI & SQL
Hiện tại trung tâm đào tạo của mình đang có hợp tác với khoảng hơn 1000 đơn vị trên cả nước, việc quản lý học viên vô cùng khó khăn. Là một người ngoại đạo về lĩnh vực công nghệ, nên mình chưa biết làm thế nào để bắt đầu làm chuyển đổi số cho doanh nghiệp của mình, thấy quảng cáo về khóa học chuyển đổi số doanh nghiệp tại Cole mình đã tham gia, khóa học đã giúp mình có phương pháp để làm các chương trình số hóa cho doanh nghiệp theo từng lộ trình và từng bước để ứng dụng được.
Nhân viên Phòng Tài chính Ngân hàng – Học viên khóa Phân tích dữ liệu từ cơ bản – nâng cao (Excel & Power Query, SQL & Power BI, R&Python)
Hiện tại mình hơn 40 tuổi, làm trong phòng tài chính của 1 Ngân hàng, nhưng mình muốn cải thiện khả năng để theo kịp các bạn trẻ với những xu hướng chuyển đổi số diễn ra mạnh mẽ mình không muốn lỡ cơ hội trong thời kỳ dịch chuyển số hóa như hiện nay
Giám đốc tập đoàn tài chính Fiin – Học viên khóa chuyển đổi số doanh nghiệp, phân tích nghiệp vụ kinh doanh
Mình gặp khó khăn trong việc tiếp cận về việc áp dụng các công nghệ và phương pháp làm chuyển đổi số, khóa học đã giúp chúng tôi vẽ được bộ quy trình nghiệp vụ trong việc số hóa doanh nghiệp của mình.
Giám đốc công ty TNHH HMGROUP – Học viên khóa chuyển đổi số doanh nghiệp, Phân tích nghiệp vụ kinh doanh
Câu chuyện chuyển đổi số đã lan chuyển khắp nơi, điều này cũng gặp phải chính trong doanh nghiệp mà mình đang làm. Có rất nhiều vấn đề nào là cách số hóa tài liệu, số hóa quy trình, số hóa các phân hệ bán hàng, làm sao để dữ liệu có thể tập trung tại một nơi giúp làm báo cáo nhanh chóng, ngoài ra còn vấn đề bảo mật và an toàn thông tin nữa. Qua khóa học chuyển đổi số và phân tích nghiệp vụ (Business Analysis) tại Cole.vn đã giúp mình nắm được phương pháp và cách làm.
Cán bộ cao cấp tập đoàn VNPT: Tham gia học khóa chuyển đổi số, khóa Phân tích nghiệp vụ kinh doanh, khoá Power BI & SQL
Loay hoay trong chính câu chuyện 1 tổ chức nhà nước, đơn vị đang thực hiện hàng chục các dự án số hóa khác nhau tuy nhiên phòng làm việc của mình lại chưa biết bắt đầu từ đâu, qua các khóa học ứng dụng chuyển đổi số tại Cole, giúp mình hiểu ra các bước và phương pháp để làm việc còn lại là tác động con người trong tổ chức cần thay đổi.
CIO Bamboo Capital Group (Sở hữu 40 công ty thành viên) – Học viên khóa chuyển đổi số doanh nghiệp, khóa data engineer, khóa phân tích dữ liệu.
Tham gia khóa học tại Cole.vn tôi được các chuyên gia và các thầy chuyển giao hết các kiến thức và không “giấu bài”, có rất nhiều tài liệu và kiến thức tôi đã được chia sẻ giúp tôi có thể ứng dụng để triển khai các chương trình số hóa cho tập đoàn 1 cách nhanh chóng.
Chuyên gia cao cấp phụ trách chuyển đổi số Tập đoàn SUNGROUP – Học viên khóa chuyển đổi số doanh nghiệp, khóa học Data Engineer, khóa phân tích nghiệp vụ doanh nghiệp.
Khi thực hiện các dự án chuyển đổi số cho tập đoàn, do nhiều nguyên nhân nóng vội mà hiện tại vẫn chưa thực hiện thành công như áp dụng nhiều phần mềm, nhưng phần mềm mua về không đáp ứng được nghiệp vụ gây ra nhiều thất thoát lãng phí. Qua khóa học tại Cole mình mới biết nguyên nhân là thiếu phần làm URD (yêu cầu người dùng). Xin cảm ơn Cole, các khóa học này thực sự đã giúp mình có phương pháp để làm chuyển đổi số doanh nghiệp.
Câu chuyện doanh nghiệp
Bộ phận đào tạo và phát triển con người của ngân hàng mong muốn tìm hiểu thêm công nghệ Blockchain ứng dụng trong ngân hàng, nhằm nắm bắt xu hướng phát triển của công nghệ trong thị trường tài chính. Chúng tôi đã lựa chọn Cole để là đối tác đào tạo khóa BlockChain này, dựa trên thông tin website chúng tôi tin tưởng vào năng lực với các dự án đào tạo chuyển đổi số mà Cole đã từng tổ chức như phân tích dữ liệu, Machine Learning, Phân tích nghiệp vụ doanh nghiệp, cũng như các khóa khóa học về Blockchain đã triển khai.
Hiện tại các công nghệ xử lý dữ liệu đã thay đổi nhanh chóng, Ban giám đốc công ty xác định bồi dưỡng đào tạo cho nhân viên về kỹ năng xử lý dữ liệu bằng các công nghệ phân tích mời nổi để việc xử lý dữ liệu được nhanh hơn. Chúng tôi nhận thấy các khóa học của Cole đáp ứng các yêu cầu mà BGĐ muốn đào tạo cho nhân viên của công ty nên chúng tôi đã lựa chọn các khóa học tại đây.
MB Ageas (MB Ageas Life) là công ty bảo hiểm liên doanh giữa ngân hàng MB, tập đoàn Ageas và công ty bảo hiểm Muaung Thai của Thái Lan. Các lãnh đạo và nhà quản lý tập đoàn đã tham gia khóa học chuyển đổi số doanh nghiệp của Cole nhằm nâng cấp kỹ năng, kiến thức và các phương pháp làm chuyển đổi số cho doanh nghiệp của mình.
Saigonbank là Ngân hàng đầu tiên được thành lập trong hệ thống Ngân hàng cổ phần tại Việt Nam hiện nay. Lãnh đạo của Saigonbank xác định rõ nhiệm vụ để làm chuyển đổi số là trọng tâm trong chiến lược phát triển, ngân hàng đã cử các cán bộ là lãnh đạo tham gia bồi dưỡng kiến thức chuyển đổi số với khóa học tại Cole nhằm nâng cấp kiến thức và cách ứng dụng và các phương pháp làm theo từng lộ trình mà các chuyên gia của Cole chia sẻ.
Tham gia khóa học phân tích dữ liệu doanh nghiệp
Công ty TNHH MTV Nhiên liệu hàng không Việt Nam (Skypec) là nhà cung ứng nhiên liệu hàng đầu cho các Hãng Hàng không tại các sân bay dân dụng Việt Nam. Với hơn 1300 cán bộ nhân viên trong doanh nghiệp, việc nâng cấp kỹ năng phân tích dữ liệu cho và các kỹ năng công nghệ mới là ưu tiên mà ban lãnh đạo dự định để đào tạo cho nhân viên trong thời kỳ xu hướng chuyển đổi số mạnh mẽ hiện nay, sau khi tham khảo các khóa học khác trên thị trường, phòng đào tạo & phát triển của công ty Skypec đã lựa chọn Cole để làm đơn vị đào tạo và bồi dưỡng với các kỹ năng cho CBNV, vì các khóa học ứng dụng chuyển đổi số tại Cole khá phù hợp và ứng dụng thực tiễn hiện nay.
Tham gia khóa học phân tích dữ liệu doanh nghiệp
WWF là Quỹ Quốc tế Bảo vệ Thiên nhiên, là một trong những tổ chức phi chính phủ lớn nhất thế giới về bảo vệ thiên nhiên. Các chuyên viên về là người phải đi thu thập và điều tra các số liệu liên quan đến hoạt động môi trường, ô nhiễm để thống kê báo cáo gửi ban lãnh đạo, nhưng vấn đề của các chuyên viên bị hiện tại là kỹ năng phân tích và tổng hợp số liệu chưa tốt, chưa biết cách xử lý và báo cáo dữ liệu sao cho đúng. Nhận thấy khóa học tại Cole.vn có nhiều các công nghệ xử lý dữ liệu mới nên công ty đã tổ chức cho các chuyên viên nghiên cứu tham gia.
