Mục tiêu
Hướng dẫn Xác thực địa chỉ số lượng lớn đã hướng dẫn bạn thực hiện các tình huống có thể sử dụng tính năng xác thực địa chỉ số lượng lớn. Trong hướng dẫn này, chúng tôi sẽ giới thiệu cho bạn các mẫu thiết kế khác nhau trong Google Cloud Platform để chạy tính năng Xác thực địa chỉ số lượng lớn.
Đầu tiên, chúng ta sẽ tìm hiểu tổng quan về cách chạy tính năng Xác thực địa chỉ khối lượng lớn trên Google Cloud Platform bằng Cloud Run, Compute Engine hoặc Google Kubernetes Engine để thực thi một lần. Sau đó, chúng ta sẽ xem cách đưa khả năng này vào quy trình dữ liệu.
Đến cuối bài viết này, bạn đã nắm rõ các lựa chọn để chạy tính năng Xác thực địa chỉ với khối lượng lớn trong môi trường Google Cloud.
Cấu trúc tham chiếu trên Google Cloud Platform
Phần này sẽ tìm hiểu kỹ hơn về các mẫu thiết kế khác nhau cho tính năng Xác thực địa chỉ số lượng lớn bằng Google Cloud Platform. Khi chạy trên Google Cloud Platform, bạn có thể tích hợp với các quy trình và đường dẫn dữ liệu hiện có.
Chạy tính năng Xác thực địa chỉ số lượng lớn một lần trên Google Cloud Platform
Dưới đây là cấu trúc tham khảo về cách xây dựng quy trình tích hợp trên Google Cloud Platform phù hợp hơn cho hoạt động một lần hoặc thử nghiệm.
Trong trường hợp này, bạn nên tải tệp CSV lên bộ chứa Cloud Storage. Sau đó, bạn có thể chạy tập lệnh Xác thực địa chỉ số lượng lớn trong môi trường Cloud Run. Tuy nhiên, bạn có thể thực thi phương thức này trong bất kỳ môi trường thời gian chạy nào khác như Compute Engine hoặc Google Kubernetes Engine. Bạn cũng có thể tải tệp CSV đầu ra lên bộ chứa Cloud Storage.
Hoạt động như một quy trình dữ liệu của Google Cloud Platform
Mẫu triển khai được hiển thị trong phần trước rất phù hợp để kiểm tra nhanh tính năng Xác thực địa chỉ số lượng lớn cho việc sử dụng một lần. Tuy nhiên, nếu cần sử dụng dịch vụ này thường xuyên trong quy trình dữ liệu, thì bạn có thể tận dụng các tính năng gốc của Google Cloud Platform hiệu quả hơn để tăng hiệu quả của giải pháp này. Bạn có thể thay đổi một số điểm như sau:
- Trong trường hợp này, bạn có thể kết xuất tệp CSV vào bộ chứa Cloud Storage.
- Tác vụ Dataflow có thể chọn các địa chỉ cần xử lý, rồi lưu vào bộ nhớ đệm trong BigQuery.
- Bạn có thể mở rộng thư viện Dataflow Python để có logic Xác thực địa chỉ khối lượng lớn nhằm xác thực các địa chỉ từ công việc Dataflow.
Chạy tập lệnh từ quy trình dữ liệu như một quy trình định kỳ kéo dài
Một phương pháp phổ biến khác là xác thực một loạt địa chỉ trong quy trình dữ liệu truyền trực tuyến dưới dạng một quy trình định kỳ. Bạn cũng có thể có các địa chỉ trong kho dữ liệu bigquery. Trong phương pháp này, chúng ta sẽ tìm hiểu cách xây dựng một quy trình dữ liệu định kỳ (cần được kích hoạt hằng ngày/hằng tuần/hằng tháng)
- Tải tệp CSV ban đầu lên bộ chứa Cloud Storage.
- Sử dụng Memorystore làm kho dữ liệu ổn định để duy trì trạng thái trung gian trong quy trình chạy trong thời gian dài.
- Lưu các địa chỉ cuối cùng vào bộ nhớ đệm trong kho dữ liệu BigQuery.
- Thiết lập Cloud Scheduler để chạy tập lệnh định kỳ.
Cấu trúc này có những ưu điểm sau:
- Khi sử dụng Cloud Scheduler, bạn có thể xác thực địa chỉ theo định kỳ. Bạn nên xác thực lại các địa chỉ hằng tháng hoặc xác thực bất kỳ địa chỉ mới nào hằng tháng/hằng quý. Cấu trúc này giúp giải quyết trường hợp sử dụng đó.
Nếu dữ liệu khách hàng nằm trong BigQuery, thì địa chỉ đã xác thực hoặc Cờ xác thực có thể được lưu vào bộ nhớ đệm trực tiếp ở đó. Lưu ý: Những dữ liệu có thể được lưu vào bộ nhớ đệm và cách mô tả chi tiết trong bài viết về Xác thực địa chỉ khối lượng lớn
Việc sử dụng Memorystore có khả năng phục hồi và khả năng xử lý nhiều địa chỉ hơn. Các bước này sẽ thêm trạng thái cho toàn bộ quy trình xử lý cần thiết để xử lý các tập dữ liệu địa chỉ rất lớn. Bạn cũng có thể sử dụng các công nghệ cơ sở dữ liệu khác như Cloud SQL[https://cloud.google.com/sql] hoặc mọi phiên bản cơ sở dữ liệu khác mà Google Cloud Platform cung cấp tại đây. Tuy nhiên, chúng tôi cho rằng bộ nhớ lưu trữ một cách hoàn hảo sẽ cân bằng giữa nhu cầu mở rộng và tính đơn giản, do đó nên là lựa chọn đầu tiên.
Kết luận
Bằng cách áp dụng các mẫu được mô tả ở đây, bạn có thể dùng API Xác thực địa chỉ cho nhiều trường hợp sử dụng và trường hợp sử dụng trên Google Cloud Platform.
Chúng tôi đã viết một thư viện Python nguồn mở để giúp bạn bắt đầu với các trường hợp sử dụng được mô tả ở trên. Dịch vụ có thể được gọi qua một dòng lệnh trên máy tính hoặc từ Google Cloud Platform hay các nhà cung cấp dịch vụ đám mây khác.
Tìm hiểu thêm về cách sử dụng thư viện trong bài viết này.
Các bước tiếp theo
Tải Sách trắng về Cải thiện quy trình thanh toán, giao hàng và hoạt động với địa chỉ đáng tin cậy rồi xem Hội thảo trên web Cải thiện quy trình thanh toán, giao hàng và hoạt động bằng tính năng Xác thực địa chỉ .
Bạn nên đọc thêm:
- Tài liệu về API xác thực địa chỉ
- Mã hoá địa lý và xác thực địa chỉ
- Khám phá bản minh hoạ về tính năng Xác thực địa chỉ
Người đóng góp
Google duy trì bài viết này. Những cộng tác viên sau đây ban đầu đã viết bài đăng này.
Các tác giả chính:
Henrik Valve | Kỹ sư giải pháp
Thomas Anglaret | Kỹ sư giải pháp
Sarthak Ganguly | Kỹ sư giải pháp