SEER sẽ chỉ cho bạn cách sử dụng công nghệ Vision

SEER sẽ chỉ cho bạn cách sử dụng công nghệ Vision

Với việc liên tục nâng cấp và triển khai sản xuất thông minh, ngày càng có nhiều sự chú ý hơn đến việc xử lý thông minh và hậu cần thông minh trong các nhà máy. Việc đưa công nghệ AI vào các kịch bản khác nhau trong các nhà máy nơi triển khai robot và AMR đã dần trở thành một xu hướng mới. Ở giai đoạn này, làm thế nào để triển khai công nghệ thị giác vào các ứng dụng một cách thuận tiện, thiết thực, an toàn và ổn định hơn sẽ trở thành điểm mấu chốt của việc kết hợp AI với các ứng dụng robot.

Và RoboView, hệ thống hậu cần AI thông minh được phát triển bởi Công ty Cổ phần Công nghệ Thông minh Thượng Hải (SEER) có những “hiểu biết sâu sắc” của riêng mình trong việc giải quyết những điểm mấu chốt này.

Các ứng dụng trực quan của hệ thống hậu cần AI thông minh RoboView 

Do sự phức tạp của bối cảnh công nghiệp, không dễ dàng để đưa công nghệ hình ảnh tiên tiến vào cảnh làm việc. Điểm mấu chốt nhất là làm thế nào để dễ dàng triển khai công nghệ trực quan tiên tiến vào các ứng dụng thực tế và cho phép khách hàng nhanh chóng thành thạo các kỹ năng. Đặc biệt trong các ứng dụng thị giác 3D, yêu cầu xác định vị trí và đánh giá chính xác các đối tượng trong cảnh 3D. Tuy nhiên, do độ khó của R&D và triển khai ở giai đoạn này cao nên ứng dụng của nó thường không phổ biến như công nghệ 2D. Tuy nhiên, với sự phát triển của công nghệ, công nghệ 3D cuối cùng sẽ trở thành xu hướng trong tương lai và được ứng dụng nhiều hơn. Hình dưới đây cho thấy quá trình của RoboView trong một ứng dụng 3D điển hình.

Tầm nhìn 3D trong nhiệm vụ chụp 3D: Tư thế của mục tiêu cần được nhận dạng

Ví dụ, trong lĩnh vực hậu cần và kho bãi của AGV, để quản lý hàng hóa hiệu quả, cần có công nghệ thị giác 3D để hoàn thành các công việc xếp dỡ và xếp hàng. Tuy nhiên, do sự khác biệt lớn trong môi trường nhà máy thực tế (điều kiện ánh sáng khác nhau), cảnh thay đổi và sự khác biệt lớn về kích thước của hàng hóa (từ vài trăm đến vài nghìn mm) và chênh lệch lớn về yêu cầu độ chính xác khi xử lý và các nhiệm vụ xếp chồng (từ cấp độ milimét đến cấp độ centimet) và các lý do khác, cần phải hình thành các kế hoạch tương ứng cho các kịch bản khách hàng cụ thể, điều này sẽ mang lại khó khăn lớn cho cả R&D và triển khai.

Để giúp việc triển khai các ứng dụng này trở nên đơn giản và hiệu quả hơn, SEER tích hợp thư viện thuật toán thị giác, thư viện camera và thư viện robot được phát triển riêng vào nền tảng ứng dụng thị giác, để bạn có thể linh hoạt lựa chọn và sử dụng các camera và chương trình tương ứng. Ví dụ: chọn máy ảnh thực sự phù hợp với ứng dụng từ hàng trăm hoặc nhiều hơn được sản xuất bởi hơn một chục nhà sản xuất, đồng thời trực tiếp chọn các thuật toán và rô bốt tương ứng để thực sự đạt được mục đích hoạt động theo hoàn cảnh thực tế.

Nền tảng ứng dụng tầm nhìn này là RoboView, hệ thống hậu cần AI thông minh được phát triển bởi Tập đoàn Công nghệ Thông minh Thượng Hải (SEER). Được hỗ trợ bởi khả năng thuật toán mạnh mẽ, thông qua việc triển khai bằng một cú nhấp chuột, nó không chỉ giảm chi phí mà còn cải thiện đáng kể hiệu quả triển khai.

Thư viện ứng dụng của RoboView

Tất cả chúng ta đều biết rằng sự xuất hiện của công nghệ thị giác là để giải quyết các vấn đề thực tế. Đối với phân xưởng hoặc nhà máy hiện tại, vấn đề lớn nhất gặp phải là hiệu quả quản lý vị trí lưu trữ thấp và RoboView có thể tích hợp quản lý vị trí một cách “thông minh” hơn vào hệ thống. Ví dụ, hệ thống lập lịch AGV có thể làm cho hệ thống hậu cần tự động được sắp xếp hợp lý hơn, giảm chi phí quản lý và nâng cao hiệu quả quản lý.

Trên thực tế, đối với hệ thống quản lý vị trí lưu trữ do RoboView triển khai, công nhân chỉ cần triển khai một vài camera và một máy chủ tầm nhìn trong kho cần quản lý vị trí lưu trữ và chạy RoboView để hoàn thành việc quản lý vị trí lưu trữ. Lúc này RoboView sẽ chịu trách nhiệm về tất cả các tác vụ quản lý vị trí lưu trữ và nó sẽ được kết nối với hệ thống lập lịch để hoàn thành các tác vụ quản lý vị trí lưu trữ trong “yên tĩnh”, chẳng hạn như bộ nhớ đầy / trống, hết / trong bộ nhớ, lỗi. trong lưu trữ và khả năng quản lý phong phú khác.

Sơ đồ hệ thống quản lý vị trí lưu trữ do RoboView triển khai

Ngoài ra, ở một số khu vực lưu trữ dày đặc, dù có lắp đặt nhiều cảm biến hơn trên xe nâng tự động thì vẫn không tránh khỏi một số tình huống nguy hiểm, chẳng hạn như tình huống trong hình sau:

Một số tình huống nguy hiểm có thể gặp ở những nơi có mật độ dày đặc

Như hình trên có thể thấy, trong bối cảnh nhân sự lẫn lộn với xe nâng tự động và AMR, RoboView có thể giải quyết những vấn đề này trong việc quản lý thống nhất thiết bị, nhân sự, hàng hóa trên một số cảnh cho khách hàng. Để biết thêm chi tiết, mời các bạn tham quan gian hàng 21-H41 của Triển lãm Công nghiệp ITES Thâm Quyến 2021. Mời các bạn nhận vé miễn phí ở cuối bài, để các bạn dễ dàng tham gia triển lãm.

RoboView được phát triển như thế nào?

RoboView được lấy cảm hứng từ cuộc thi robot bóng đá nhóm nhỏ RoboCup. Là nhóm nhấn mạnh sự hợp tác và đối đầu trong nhóm nhất trong RoboCup, nhóm nhỏ sử dụng các dịch vụ hình ảnh bên ngoài làm cách chính để cảm nhận vị trí của robot. Các cảnh điển hình như sau:

Sơ đồ các phương pháp cảm biến chính về vị trí của các robot bóng đá nhóm nhỏ RoboCup

Thông qua nhận thức thị giác bên ngoài và một bộ não thống nhất, các robot trong hiện trường được quản lý một cách thống nhất, để nhận ra nhiều sự hợp tác và đối đầu phức tạp khác nhau.

Địa điểm thi đấu của các robot bóng đá nhóm nhỏ Robocup thế giới

Bắt đầu từ đó, SEER đã đề xuất sáng tạo RoboView, một hệ thống hậu cần AI thông minh, bên cạnh hệ thống định vị dựa trên SLAM.

  1. Kiến trúc RoboView

RoboView bao gồm một nền tảng nhận thức và các nút nhận thức. Là cốt lõi của hệ thống, nền tảng nhận thức là cung cấp bốn phần chính bao gồm tất cả các dịch vụ trực quan, thông tin cần thiết cho các nhà máy thông minh và hệ thống hậu cần (bao gồm thông tin quản lý vị trí lưu trữ, thông tin theo dõi đội xe và trạng thái vận hành thiết bị), yêu cầu dịch vụ trực quan vận hành xe nâng thông tin giám sát ứng phó và an toàn hệ thống; Các nút cảm nhận bao gồm thiết bị thu nhận hình ảnh cố định hoặc di động (2D) / đám mây điểm (3D) và điều chỉnh.

Nền tảng nhận thức là một máy chủ tầm nhìn độc lập, chủ yếu cung cấp khả năng nhận thức bằng AI trực quan và nhận dạng, định vị và phát hiện các mục tiêu trong khu vực nhận thức thông qua công nghệ thị giác 2D / 3D. Nền tảng nhận thức chỉ cần một đầu vào và một định nghĩa đầu ra (DOO, Definition Of Output) để hoàn thành một dịch vụ nhận thức. Do đó, nó là một nền tảng nhận thức thông tin đa nhiệm và độc lập.

Các nút cảm nhận được triển khai theo cách phân tán và được chia thành các nút cố định và nút di động. Nút cố định đề cập đến việc cài đặt cố định thiết bị thu nhận hình ảnh (2D) / đám mây điểm (3D). Ví dụ, các camera giám sát thông thường, camera ToF, 3D lidar, v.v. có thể được chuyển thành các nút cảm nhận; Các nút di động đề cập đến các loại thiết bị thu nhận hình ảnh trực quan (2D) / đám mây điểm (3D) được cài đặt trên rô bốt di động, có thể được kết nối liền mạch với RoboView thông qua bộ điều khiển lõi SRC của SEER.

Các nút cảm nhận có thể được thêm vào bản đồ SLAM thông qua phần mềm triển khai một cửa và quy trình công việc tương ứng có thể được định cấu hình, để nhận ra việc cài đặt và triển khai nhanh chóng các nút. Đồng thời, hệ thống hậu cần AI thông minh RoboView có thể làm việc với SEED trung gian kỹ thuật số của SEER để hiện thực hóa việc triển khai, lập kế hoạch và giám sát các hệ thống khác nhau trong trang web, đồng thời thực hiện việc giám sát an toàn và lập kế hoạch hoạt động của AMR và xe nâng không người lái.

  1. Công nghệ nhận thức đầy đủ AI

Nền tảng nhận thức đầy đủ của AI tích hợp một số công nghệ chính và cung cấp nhiều thông tin cho hệ thống quản lý hậu cần.

Hiển thị nâng cao: Thông qua một số nút nhận thức cố định để “quan sát” theo mọi hướng, kết hợp với công nghệ đăng ký tầm nhìn đa điểm, nối và hợp nhất, bạn có thể nhìn thấy trạng thái thời gian thực của toàn bộ kho và thông tin tăng cường AR được thêm vào video giám sát ban đầu để giúp nhân viên tại chỗ trực quan hơn và rõ ràng hơn về tình trạng thiết bị.

Giám sát phương tiện: Kết hợp với thông tin riêng của xe nâng để đạt được định vị và theo dõi thời gian thực của từng AMR và xe nâng tự động trong hiện trường, nắm bắt và dự đoán quỹ đạo di chuyển của xe nâng. Kết hợp với SEED trung gian kỹ thuật số của SEER để kịp thời gửi các hướng dẫn điều chỉnh cho các xe nâng đi chệch khỏi nhiệm vụ và cảnh báo đến nền tảng.

Nhận dạng và định vị mục tiêu: RoboView không chỉ bao gồm các thuật toán cảm nhận hình ảnh thông thường mà còn bao gồm các thuật toán học sâu nâng cao, giúp cải thiện đáng kể hiệu suất chống nhiễu của hệ thống. Công nghệ phát hiện mục tiêu có thể phát hiện các đối tượng mục tiêu, chẳng hạn như ô tô hoặc người, từ luồng video trong thời gian thực; Công nghệ phân đoạn đám mây điểm 3D có thể trích xuất trực tiếp các đối tượng mục tiêu từ đám mây điểm và cung cấp thông tin quan trọng như kích thước và vị trí để làm cho thuật toán ổn định và đáng tin cậy hơn. Ngoài ra, thông qua công nghệ phân đoạn ngữ nghĩa hình ảnh, nó cũng có thể đạt được phân đoạn và trích xuất một lần cho các dấu hiệu kiểm soát kho hàng, biển báo đường bộ và xe nâng đang vận hành, cung cấp thông tin quan trọng khác cho nền tảng điều khiển.

Quản lý vị trí: Thông qua nhiều nút nhận thức cố định được triển khai trong hiện trường, nền tảng nhận thức có thể thu được tất cả thông tin vị trí trong hiện trường theo thời gian thực và sử dụng công nghệ nhận dạng 2D để xác định và định vị thông tin hiệu quả của vị trí, bao gồm nhưng không giới hạn ở thông tin như có hàng hóa không, có ô tô hay không, có vật chất lạ xâm nhập hay không, v.v. Và nó có thể công bố thông tin này (theo cấu hình của hệ thống hậu cần, thông tin có thể được gửi đến hệ thống hậu cần và xe hơi). Hệ thống hậu cần hoặc xe nâng có thể đưa ra quyết định hiệu quả dựa trên thông tin này, giúp cải thiện đáng kể hiệu quả quản lý kho hàng.

Giám sát an toàn: Nó chủ yếu liên quan đến việc giám sát thời gian thực trạng thái của tất cả mọi thứ trong hiện trường, bao gồm: giám sát sự xâm nhập của các vật thể lạ (nhân viên không vận hành và người vận hành đi vào khu vực không an toàn, xe nâng rời khỏi quỹ đạo nhiệm vụ đặt trước, không vận hành xe nâng hàng, v.v.), giám sát tình trạng hàng hóa, phát hiện chướng ngại vật trong lộ trình xe nâng, giám sát các thiết bị khóa liên động khác (như giá kệ lớn, thang máy).

Giám sát thời gian thực tất cả trạng thái của robot trong hiện trường

Comments (3)

  • Joe Doe Reply

    Lorem ipsum dolor sit amet, consectetur adipiscing elit. Nam viverra euismod odio, gravida pellentesque urna varius vitae, gravida pellentesque urna varius vitae. Lorem ipsum dolor sit amet, consectetur adipiscing elit. Nam viverra euismod odio, gravida pellentesque urna varius vitae. Sed dui lorem, adipiscing in adipiscing et, interdum nec metus. Mauris ultricies, justo eu convallis placerat, felis enim ornare nisi, vitae mattis nulla ante id dui.

    28 Tháng Sáu, 2016 at 1:03 chiều
    • Joe Doe Reply

      Lorem ipsum dolor sit amet, consectetur adipiscing elit. Nam viverra euismod odio, gravida pellentesque urna varius vitae, gravida pellentesque urna varius vitae.

      28 Tháng Sáu, 2016 at 1:04 chiều
  • Joe Doe Reply

    Lorem ipsum dolor sit amet, consectetur adipiscing elit. Nam viverra euismod odio, gravida pellentesque urna varius vitae, gravida pellentesque urna varius vitae.

    28 Tháng Sáu, 2016 at 1:04 chiều

LEAVE A COMMENT

Your email address will not be published. Required fields are marked *