是否有可能知道在鼠標附近顯示哪些文本？

Question

我只是計劃實現一些功能，如當鼠標懸停在Mac OS X平臺屏幕上的某些文本/字上時，「查找字典」。

如何在屏幕上顯示鼠標附近的文本/文字，即使它們不在我自己的應用程序中。

什麼我可以做的是：

1. 使用工作臺知道應用程序正在運行什麼。
2. 使用可訪問性API來了解屏幕上的頂級UIElement。
3. 如果應用程序使用類似於NSTextView（我通過檢查UIElement的「selected text」屬性來獲取它），使用可訪問性API來了解UIElement的選定字符串。

什麼我不能做的是：

1. 如Safari一些應用程序，使用WebKit的框架，唯一的事情，我可以從輔助功能API得到的是「價值屬性」，這是當前內容HTML和一些名爲「AXTextMarker」的屬性。這些屬性不能在Google或任何文檔中找到。
2. 有些應用程序甚至不支持Accessibility API，我能得到的僅僅是它的屏幕截圖。

有什麼方法可以調用系統API來識別圖像中的文本嗎？在雪豹中，有中文或日文輸入的手寫識別器功能，所以應該是一些OCR功能？我找不到任何開放的API。

Answer 1

我們可以得到的任何文本框等的文本使用hook.i沒有在Mac試過窗口窗戶，但你可以看看下面的文章 SetWindowsHookEx for Mac OS X?

Answer 2

什麼你也許可以做的是：
使用一個元鍵+一鍵選擇文本後激活詞典的關鍵和絃。如果每當我接近文本一段時間時，我都會發現它令人難以置信的令人討厭，一本字典彈出。特別是因爲我閱讀了大量的白皮書，幾乎所有可以想象的字典都會花費大部分時間窒息而死。