Java在屏幕上找到圖像

Question

你們可以給我一些關於如何在屏幕上找到圖像的提示。我的意思是，一個簡單的像素組合。例如，它找到30x30像素白色方塊的座標。

Java機器人類允許我找到某個像素的顏色。但是我需要與之相反，我希望我的程序能夠掃描我的屏幕，然後告訴我這個小圖像的座標。那麼我可以通過所有的像素與機器人，但它應該比這更快。快多了。

有什麼建議嗎？

Answer 1

那麼我可以通過與機器人的所有像素，但它應該比這更快。快多了。

恐怕這正是你必須要做的。

如果所有像素都應該是白色，則可以先採用30像素寬的步驟，如果您找到白色像素，則採取5像素級，然後如果這些像素也是白色，則檢查方塊中剩餘的像素。

事情是這樣的：

.  .  .  .  .  . 



.  ..........  .  .  . 
     ...... 
     . . . . 

     . . . . 
.  .  .  ..........  . 
          .......... 
          .......... 
          .......... 
          .......... 
.  .  .  .......... 

Answer 2

其實，還有一個更simpliler或更可靠的解決方案這一點。您可以在Java應用程序內部實現Sikuli庫，以在屏幕上找到圖像元素並與它們交互。它旨在自動化UI測試，但我認爲它可以很容易地滿足您的需求。

示例應用程序（source）：

import java.net.MalformedURLException; 
import java.net.URL; 

import org.sikuli.api.*; 
import org.sikuli.api.robot.Mouse; 
import org.sikuli.api.robot.desktop.DesktopMouse; 
import org.sikuli.api.visual.Canvas; 
import org.sikuli.api.visual.DesktopCanvas; 

import static org.sikuli.api.API.*; 

public class HelloWorldExample { 

    public static void main(String[] args) throws MalformedURLException { 

      // Open the main page of Google Code in the default web browser 
      browse(new URL("http://code.google.com")); 

      // Create a screen region object that corresponds to the default monitor in full screen 
      ScreenRegion s = new DesktopScreenRegion(); 

      // Specify an image as the target to find on the screen 
      URL imageURL = new URL("http://code.google.com/images/code_logo.gif");     
      Target imageTarget = new ImageTarget(imageURL); 

      // Wait for the target to become visible on the screen for at most 5 seconds 
      // Once the target is visible, it returns a screen region object corresponding 
      // to the region occupied by this target 
      ScreenRegion r = s.wait(imageTarget,5000); 

      // Display "Hello World" next to the found target for 3 seconds 
      Canvas canvas = new DesktopCanvas(); 
      canvas.addLabel(r, "Hello World").display(3); 

      // Click the center of the found target 
      Mouse mouse = new DesktopMouse(); 
      mouse.click(r.getCenter()); 
    } 
} 

另見How to use Sikuli inside your Java programs進行安裝。