Cách sử dụng N8N để chuyển đổi và thao tác dữ liệu
Hiểu N8N
N8N là một công cụ tự động hóa nguồn mở cho phép người dùng kết nối các ứng dụng và dịch vụ khác nhau để hợp lý hóa quy trình công việc và tự động hóa các tác vụ lặp đi lặp lại. Với bộ sưu tập tích hợp rộng rãi và giao diện thân thiện với người dùng, N8N vốn được trang bị cho các quy trình chuyển đổi và thao tác dữ liệu. Chuyển đổi dữ liệu chuyển đổi, lọc và làm giàu dữ liệu là điều cần thiết để phân tích dữ liệu hiệu quả và những hiểu biết có thể hành động.
Thiết lập N8N
Cài đặt
Phương pháp Docker
Đối với những người quen thuộc với Docker, N8N có thể được cài đặt thuận tiện thông qua container Docker. Bắt đầu bằng cách chạy lệnh sau:
docker run -d -p 5678:5678 n8nio/n8nPhương thức Node.js
Ngoài ra, nếu bạn thích cài đặt Node.js, hãy sử dụng các mục sau:
npm install n8n -g
n8nSau khi được cài đặt, bạn có thể truy cập N8N qua https://localhost:5678.
Cấu hình ban đầu
Sau khi khởi chạy N8N, hãy hoàn thành các bước cấu hình ban đầu sau trong thiết lập của bạn:
- Thiết lập cơ sở dữ liệu: Chọn cơ sở dữ liệu để lưu trữ quy trình công việc (SQLite, PostgreSQL, v.v.).
- Xác thực cơ bản: Vì lý do bảo mật, định cấu hình xác thực người dùng.
- Biến môi trường: Thiết lập các biến môi trường để kiểm soát hành vi N8N. Điều này bao gồm các biến để thiết lập cài đặt URL hoặc SMTP tùy chỉnh để thông báo.
Tạo quy trình làm việc đầu tiên của bạn
Bảng điều khiển N8N cung cấp một biểu diễn trực quan về quy trình công việc của bạn. Thực hiện theo các bước này để tạo quy trình làm việc đầu tiên của bạn:
- Tạo quy trình công việc: Nhấp vào nút ‘Mới’ để bắt đầu. Một tấm bạt trống sẽ xuất hiện để thêm các nút.
- Thêm các nút: Sử dụng “bảng điều khiển nút” để tìm kiếm và thêm các ứng dụng khác nhau, chẳng hạn như Google Sheets, AirTable hoặc API REST.
- Kết nối các nút: Kéo từ đầu ra của một nút sang đầu vào khác để tạo luồng dữ liệu. Sử dụng ‘Thêm kết nối’ để thiết lập các liên kết.
Nguồn dữ liệu và tích hợp
Các nút thường được sử dụng
Nút yêu cầu HTTP
Nút này cho phép bạn truy xuất hoặc gửi dữ liệu qua các yêu cầu API. Định cấu hình nó bằng cách chỉ định phương thức HTTP (nhận, bài, đặt, xóa) và URL. Bạn cũng có thể tham số hóa các yêu cầu bằng các biến N8N.
Nút Google Sheets
Lý tưởng để trích xuất hoặc cập nhật dữ liệu trong bảng tính. Với nút này, bạn có thể điều khiển các hàng và cột bằng các hành động khác nhau, chẳng hạn như ‘nhận được nhiều’, ‘tạo’ hoặc ‘cập nhật’.
Các nút nâng cao
Nút chức năng
Nút chức năng cho phép bạn viết mã JavaScript để thực hiện các phép biến đổi dữ liệu phức tạp. Sử dụng nút này để thao tác các mảng dữ liệu, thực hiện tính toán hoặc dữ liệu định dạng để tiêu thụ bên ngoài.
Ví dụ:
items.forEach(item => {
item.json['newField'] = item.json['oldField'] * 10;
});
return items;Mã mã
Tương tự như nút chức năng, nhưng hỗ trợ nhiều ngôn ngữ (JavaScript, Python, v.v.). Điều này cung cấp sự linh hoạt nếu bạn cảm thấy thoải mái với nhiều ngôn ngữ kịch bản.
Kỹ thuật thao tác dữ liệu
Biến đổi cơ bản
Ánh xạ dữ liệu
Việc sử dụng nút đặt có thể giúp các khóa JSON Remap hoặc các giá trị thay thế. Trong trường hợp bạn muốn chuyển đổi dữ liệu từ nhiều nguồn thành một lược đồ thống nhất, phương pháp này có hiệu quả cao.
Cấu hình ví dụ trong nút đặt:
| Khóa JSON | Giá trị |
|---|---|
| tên | {{$json["user"]["name"]}} |
| tuổi | {{$json["user"]["age"]}} |
Logic có điều kiện
Tận dụng nút IF để giới thiệu logic có điều kiện vào quy trình công việc dữ liệu của bạn. Các quyết định có thể được đưa ra dựa trên nội dung của dữ liệu đến, cho phép các quy trình công việc động.
Ví dụ:
- Nếu tuổi> 30, hãy cập nhật ‘trạng thái’ lên ‘người lớn’.
- Nếu tuổi <= 30, hãy cập nhật 'trạng thái' lên 'thanh niên'.
Bộ lọc dữ liệu
Nút bộ lọc cho phép làm sạch dữ liệu bằng cách xóa các mục không liên quan hoặc trùng lặp. Bạn có thể chỉ định các điều kiện để lưu dữ liệu, hợp lý hóa các bộ dữ liệu hiệu quả để phân tích hoặc báo cáo.
Lặp qua dữ liệu
Sử dụng nút ‘Splitinbatches’ để xử lý hàng loạt các bộ dữ liệu lớn. Điều này cho phép bạn chia dữ liệu của mình thành các tập hợp nhỏ hơn, làm cho các phép biến đổi dễ quản lý hơn và ít bị lỗi hơn.
Webhooks để tích hợp dữ liệu thời gian thực
Sử dụng các nút Webhook cho phép bạn kích hoạt quy trình công việc dựa trên dữ liệu đến từ các dịch vụ khác nhau. Điều này là vô giá khi xử lý dữ liệu thời gian thực.
- Thiết lập Node Webhook: Kéo nút Webhook lên khung vẽ và lưu ý URL điểm cuối do N8N cung cấp.
- Tích hợp: Định cấu hình các ứng dụng bên ngoài để gửi dữ liệu đến URL này, bắt đầu quy trình làm việc.
Tập hợp dữ liệu và làm giàu
Hợp nhất dữ liệu
Nút hợp nhất cho phép kết hợp dữ liệu từ các nguồn khác nhau dựa trên các khóa được chỉ định. Điều này rất hữu ích để củng cố thông tin, chẳng hạn như hợp nhất hồ sơ người dùng từ nhiều dịch vụ.
Cấu hình liên quan đến:
- Chọn ‘Hợp nhất bởi khóa’ để kết hợp các bộ dữ liệu.
- Chỉ định ‘khóa’ để khớp với bộ dữ liệu.
Dữ liệu phong phú
Thêm các quy trình làm giàu bằng API của bên thứ ba. Ví dụ bao gồm truy xuất tên quốc gia dựa trên dữ liệu vị trí người dùng hoặc xác thực địa chỉ.
Xử lý lỗi
Bao gồm nút ‘Kích hoạt lỗi’ là rất quan trọng để theo dõi quy trình công việc của bạn. Bằng cách này, nếu xảy ra lỗi, bạn có thể gửi cảnh báo hoặc đăng nhập sự kiện mà không mất dữ liệu.
Lập kế hoạch quy trình công việc
Sử dụng nút Cron để tự động thực hiện theo các khoảng thời gian được chỉ định. Điều này cho phép làm mới dữ liệu kịp thời, chẳng hạn như báo cáo hàng ngày hoặc các tác vụ tổng hợp dữ liệu hàng tuần.
Cron Biểu thức cú pháp
Cron Node sử dụng cú pháp Cron Standard với các trường trong phút, giờ, ngày của tháng, tháng và ngày trong tuần. Ví dụ: để lên lịch cho một quy trình công việc để chạy mỗi ngày vào lúc 9 giờ sáng, biểu thức sẽ là:
0 9 * * *Xuất dữ liệu
Tạo báo cáo
Sử dụng nút phản hồi HTTP để tạo các báo cáo hoặc bảng tính có thể tải xuống dựa trên dữ liệu được xử lý trong quy trình làm việc của bạn. Bạn có thể định dạng phản hồi trong CSV, JSON hoặc XML.
Nhập dữ liệu
Đối với nhập dữ liệu, sử dụng các nút như FTP, SFTP hoặc lưu trữ đám mây (Dropbox, Google Drive). Chúng cho phép bạn kéo các tệp dữ liệu để chuyển đổi và xử lý liền mạch.
Giám sát và gỡ lỗi
N8N cung cấp các công cụ giám sát tích hợp để giám sát việc thực hiện quy trình làm việc. Sử dụng ‘Nhật ký thực thi’ để theo dõi thành công và thất bại. Mỗi lần thực hiện có thể cung cấp những hiểu biết chi tiết về nơi quy trình công việc có thể cần điều chỉnh.
Thực tiễn tốt nhất để chuyển đổi dữ liệu
- Xác thực dữ liệu: Luôn xác nhận đầu vào để ngăn chặn tham nhũng dữ liệu.
- Kiểm soát phiên bản: Thường xuyên cập nhật và phiên bản quy trình công việc của bạn khi điều kiện thay đổi.
- Tài liệu: Tài liệu cho mỗi mục đích của mỗi nút trong một quy trình công việc để tham khảo trong tương lai.
- Tối ưu hóa quy trình công việc: Giảm thiểu các nút và kết nối không cần thiết để hợp lý hóa hiệu suất.
