A few days ago, Rob Isaac’s Chromebook got an unfortunate update: [Mastodon] This task continuously reads every pixel in every tab in every window to build a machine vision model for “accessi…

Das "KI-Update" liefert werktäglich eine Zusammenfassung der wichtigsten KI-Entwicklungen.

Today Google bricked my Chromebook by force-installing a hidden extension that trains a machine vision model on the contents of my screen without my consent, making the whole machine too hot to touch,...

Google AI представила ScreenAI, новумодель мови зору (Vision-Language Model, VLM), спроєктовану для глибокого розуміння та інтерпретації користувацьких інтерфейсів та інфографіки.

A few days ago, Rob Isaac’s Chromebook got an unfortunate update: [Mastodon] This task continuously reads every pixel in every tab in every window to build a machine vision model for “accessi…

A few days ago, Rob Isaac’s Chromebook got an unfortunate update: [Mastodon] This task continuously reads every pixel in every tab in every window to build a machine vision model for “accessi…

Today Google bricked my Chromebook by force-installing a hidden extension that trains a machine vision model on the contents of my screen without my consent, making the whole machine too hot to touch, and I am once again begging someone, anyone, to remove Chrome from Google by any means necessary. https://research.google/blog/screenai-a-visual-language-model-for-ui-and-visually-situated-language-understanding/

[OTTOCAST] 株式会社OTTOCAST(所在地：中国、代表者：チョウ セツキン)は、新世代ポータブルディスプレイ「OTTOCAST ScreenAI」を発売しました。2025年11月30日まで、お得なキャンペーンを実施します。 本商品は、ディスプ...

🔥￥3,399🔥💍34pt(1%)💍💎40%OFFクーポン💎

Screen user interfaces (UIs) and infographics, sharing similar visual language and design principles, play important roles in human communication and human-machine interaction. We introduce...

@John6666 Thanks, yes, exactly. Are there smth ready to use? I read the paper about ScreenAI but can’t find ScreenAI model on HF. The second model from Xiaomi also looks cool but github description probably suggests it should be trained before usage. The ideal would be ready to use model that could be downloaded from HuggingFace

Like these? huggingface.co ### Paper page - ScreenAI: A Vision-Language Model for UI and Infographics... Join the discussion on this paper page github.com ### GitHub - XiaoMi/mobilevlm: MobileVLM: A Vision-Language Model for Better... MobileVLM: A Vision-Language Model for Better Intra- and Inter-UI Understanding

Google is taking another step on the long road to language and voice-controlled computer interfaces.

:pytorch:PyTorchKR🇰🇷 최근 Google의 ScreenAI나 Apple의 ReALM과 같은 스마트폰을 비롯한 다양한 화면에서의 내용을 바탕으로 사용자와 의사소통을 하는 연구들이 진행되고 있습니다. 이러한 연구들이 사용자와 스마트폰 간의 연결을 더 잘 하기 위한 것이라면, Nexa AI에서 공개한 Octopus-v2 모델은 사용자의 입력을 받아 실제로 Android 단말을 제어하면서 여러가지 기능들을 실행할 수 있는 LLM입니다. 🤖 Octopus-v2는 스마트폰과 같은 단말에서 동작하는, 에이전트(Agent)를 위한 LLM으로, 상대적으로 작은 2B 규모의 크기를 갖고 있습니다. 또한, Android API를 통해 안드로이드 시스템 관리부터 다양한 디바이스의 조율까지 폭넓게 활용할 수 있으며, 정확도와 속도 측면에서도 손색없는 성능을 보이고 있습니다. Octopus-v2 모델을 사용하여 어떠한 일들이 앞으로 가능할지, 함께 고민해보시죠! ...

:pytorch:PyTorchKR🇰🇷 Apple에서 ReALM 연구를 공개한데 이어, Google에서도 유사한 목적을 위한 연구로 보이는 연구를 공개하였습니다. Google이 공개한 "ScreenAI: UI 및 인포그래픽 이해를 위한 비전-언어 모델" 논문은 (아마도 Android와 같은) UI(User Interface, 사용자 인터페이스)와 인포그래픽을 이해하기 위한 비전과 언어 모델링의 융합을 통한 접근 방식을 소개하고 있습니다. 함께 살펴보시죠 😃 ScreenAI: UI와 시각적 언어 이해를 위한 시각-언어 모델 (ScreenAI: A Vision-Language Model for UI and Infographics Understanding) ScreenAI 소개 ScreenAI는 UI와 인포그래픽의 이해와 상호작용을 위해 특별히 맞춤화된 시각-언어 모델 분야에서의 전진을 나타냅니다. 차트나 다이어그램, 테이블 등을 포함한 인포그...

Today Google bricked my Chromebook by force-installing a hidden extension that trains a machine vision model on the contents of my screen without my consent, making the whole machine too hot to touch, and I am once again begging someone, anyone, to remove Chrome from Google by any means necessary. https://research.google/blog/screenai-a-visual-language-model-for-ui-and-visually-situated-language-understanding/