Appleがスマホの画面を認識できるマルチモーダルLLM「Ferret-UI」を発表、SiriがiPhoneアプリのUIを理解できるようになる可能性も
Appleの研究者が、スマートフォンのアプリUIを理解するために設計したマルチモーダル大規模言語モデル(MLLM)の「Ferret-UI」を開発したという論文を、未査読論文リポジトリであるarXivで公開しました。 [2404.05719] Ferret-UI: Grounded Mobile UI Understanding with Multimodal LLMs https://arxiv.org/abs/2404.05719 Apple teaching an AI system to use apps; maybe for advanced Siri https://9to5mac.com/2024/04/09/ferret-ui-advanced-siri/ ChatGPTのようなチャットボットAIシステムのベースとなっている大規模言語モデル(LLM)は、主にウェブサイトから収
iPhoneやiPadが「脳」で操作可能になる - iPhone Mania
障害や疾患のために手足を使えず、会話もできない人々が、考えるだけでiPhoneやiPadを操作できるようにするデバイスを、米ニューヨークの企業が開発しました。 タイプ入力や会話ができなくてもiPadが使える 米Synchronが開発したデバイス「Synchron Switch」のセンサー部分が、手術によって利用者の脳に埋め込まれます。同デバイスはすでに米食品医薬品局（FDA）より、コンピューター・ブレイン・インプラントとして臨床試験を行う認可を得ています。 Synchronによると、現在6人の被験者がデバイスを使用しており、オーストラリア・メルボルン在住のロドニー・ゴーハム氏はそのひとりです。ゴーハム氏は筋萎縮性側索硬化症（ALS）のため、タイプ入力や会話ができませんが、脳に埋め込んだセンサーとSynchron Switchを使って、現在iPadを操作可能となっているそうです。 足を踏むイ
iOS 16.1ではFace ID対応iPhoneのバッテリーインジケーターが残量により変化し、iPhone XR/11やiPhone 12/13 miniでもバッテリー残量(%)を表示することが可能に。
iOS 16.1ではFace ID対応iPhoneのバッテリーインジケーターが残量により変化し、iPhone XR/11やiPhone 12/13 miniでもバッテリー残量(%)を表示することが可能になっています。詳細は以下から。 Appleが現地時間2022年09月12日にリリースした「iOS 16」で、Face ID対応のiPhoneでバッテリーインジケーター内にバッテリー残量(%)を表示する機能を実装しましたが、 現地時間10月24日にリリースされた「iOS 16.1」では、このバッテリーインジケーターの残量表示が改善され、バッテリー残量(%)のフォントの調整に加えバッテリー残量に合わせてインジケーターアイコンが変化するデザインになっています。
デザイン担当者及び上級副社長、独占インタビュー アップル、最新の魔法は、ハードとソフトの境界線を無くした「Dynamic Island（ダイナミックアイランド）」 | Webマガジン「AXIS」 | デザインのWebメディア
デザイン担当者及び上級副社長、独占インタビュー アップル、最新の魔法は、ハードとソフトの境界線を無くした 「Dynamic Island（ダイナミックアイランド）」 iPhone登場15周年の今年、新たに発表された上位モデル、iPhone 14 ProとiPhone 14 Pro Maxは、サイドボタンを押しても画面が消えない「常時表示」など、今後のiPhoneの操作の方向性を隠喩するマイルストーン的な製品に仕上がっている。 そのなかでも特に注目に値するのが「Dynamic Island（ダイナミックアイランド）」だろう。今回、この画期的な新機能を開発したAppleデザインスタジオのヒューマンインターフェースデザイン部門を率いる副社長のアラン・ダイとソフトウェアエンジニアリング担当の上級副社長、クレイグ・フェデリギに画期的新機能誕生の背景や、それを実現したAppleの開発体制について話を聞
Apple役員、Dynamic Islandの開発秘話を語る - iPhone Mania
日本のデザイン誌のインタビューに答えたAppleのヒューマンインターフェースデザイン担当副社長のアラン・ダイ氏とソフトウェアエンジニアリング担当上級副社長のクレイグ・フェデリギ氏は、iPhone14 Proシリーズで新たに導入したDynamic Islandがどのように開発されたのかを明らかにしました。 iPhone X以来5年ぶりの大きな操作の変化 フェデリギ氏は、iPhone14 ProにはiPhone X以来の大きな操作上の変化があったと述べています。 5年前のiPhone Xでホームボタンがなくなったことで、ロック画面の解除やホーム画面への戻り方、アプリの切り替えなど、iPhoneのさまざまな操作方法が根本的に見直されました。また、この新機能によってiPhoneの見た目も変わり、複数のアプリの起動方法や通知の方法、バックグラウンドで進行している動作をどう管理するかなども再考されまし
iOS 16ではキー入力時にサウンドに加え触覚でフィードバックを返せるように。
iOS 16ではキー入力時にサウンドに加え触覚でフィードバックを返せるようになっています。詳細は以下から。 Appleは現地時間2022年09月12日にリリースした「iOS 16」では、英語キーボードに「Dvorak配列」が追加されていますが、同じく、iOS 16ではキーボードでのキー入力時に触覚フィードバック(手応え)を感じられるように鳴っています。 iOS 16でキーボードの触覚フィードバックを得るには、設定アプリの[サウンドと触覚] → [キーボードのフィードバック]にある「触覚」をONにするだけで、これまでサウンドだけだったフィードバックに触覚も感じられるようになるので、iOS 16へアップグレードされた方はチェックしてみてください。 おまけ Appleが公開したサポートドキュメントによると、触覚フィードバックをONにすることで、iPhoneのバッテリー駆動時間に影響が出る可能性が
iPhone14 Proの新機能Dynamic Island、動作の詳細 - iPhone Mania
iPhone14 Pro、iPhone14 Pro Maxで導入された新機能、Dynamic Islandの動作を米メディア9to5Macがまとめているのでご紹介します。 ノッチからDynamic Islandへ iPhone14 ProとiPhone14 Pro Maxでは、従来モデルのノッチから、アニメーションで各種アプリの動作状態を伝えるDynamic Islandへと進化しました。 Dynamic Islandは、従来はノッチとして1つにまとめられていた、顔認証用のセンサーとインカメラを2つに分け、その隙間のディスプレイ部分をウィジェットとして活用する新機能です。 米メディア9to5Macは、iPhoneシミュレーターを使ってDynamic Islandを動作させた様子を公開しています。 Dynamic Islandを搭載するiPhone14 ProとiPhone14 Pro Ma
iPhone14 Proの新色、Dynamic Islandなどのハンズオン動画 - iPhone Mania
iPhone14 Pro発表直後のハンズオンセッションに参加したメディア関係者が、画像や動画を公開しています。新色ディープパープルの見え方、Dynamic Islandの動作などを確認できます。 発表イベント直後のハンズオンセッション 「Far Out.」イベントで発表されたばかりの、iPhone14 Proなど新製品のハンズオンセッションがスティーブ・ジョブズ・シアターで開催されました。 発表会に参加したメディア関係者がSNSに公開した、iPhone14 Proのハンズオン動画を米メディア9to5Macがまとめているのでご紹介します。 新色スペースブラックとグラファイトを比較 米メディアTechCrunchの編集長マシュー・パンザリノ氏は、iPhone13 ProのグラファイトとiPhone14 Proの新色スペースブラックを並べた画像を投稿しています。スペースブラックの背面は、グラファ
【速報】iPhone14 Pro/Pro Max発表！ノッチを廃止、画面は常時点灯 - iPhone Mania
【速報】iPhone14 Pro/Pro Max発表！ノッチを廃止、画面は常時点灯 2022 9/08 Appleは、現地時間9月7日、6.1インチのiPhone14 Proと、6.7インチのiPhone14 Pro Maxを発表しました。ノッチが廃止され、アニメーションで柔軟な操作が可能な「Dynamic Island」へと進化したほか、常時点灯ディスプレイを搭載、メインカメラは最大4,800万ピクセルに拡大、新開発のA16 Bionicプロセッサを搭載しています。予約受付開始は9月9日、販売開始は9月16日です。 画面上部のノッチは「Dynamic Island」に Appleは、iPhone14シリーズの上位モデルとしてiPhone14 ProとiPhone14 Pro Maxを発表しました。 最大の特徴のひとつは、画面上部のノッチが廃止され、各種の通知を表示し、ユーザーの操作に応じ
iPhoneやiPadの筐体側面や背面に操作部を搭載する特許取得 - iPhone Mania
米国特許商標庁（USPTO）が現地時間2022年8月2日、Appleが出願していた、iPhoneやiPadの筐体側面や背面に操作部を搭載する特許を付与しました。 ディスプレイ以外も操作部として活用しようとする特許 本特許の概要欄には、電子機器の筐体外面に配置される触覚操作部に関するものと記載されています。 触覚操作部が配置される筐体外面について特許では、触覚操作に対応するガラス部は摩擦抵抗を増やすための加工が施され、滑らかなものではないと説明されています。 ガラス部に触れて行う操作には、タッチ入力、タップ、圧力を加えながらの操作が含まれています。 圧力を加えながらの操作は、3D Touchのようなものを想定しているのかもしれません。 Appleは、筐体全面をガラス素材とし、筐体側面や背面を表示部および操作部に活用する特許も取得しています。 Source:USPTO via Patently
iOS16、iPhoneでの文字入力時の触覚フィードバックに対応 - iPhone Mania
Appleは、iOS16でiPhoneのキーボード入力時に、iPhoneがかすかに振動する触覚フィードバック機能が利用可能になると発表しています。 iPhoneの文字入力に振動で反応 Appleが世界開発者会議（WWDC22）で発表したiOS16では、iPhoneで文字を入力すると振動でユーザーが操作を確認できる触覚フィードバックに対応します。 触覚フィードバックは、iPhoneのアプリアイコンや文字列を長押しした際にiPhoneが細かく振動する機能です。 Appleが公開したiOS16のプレビューページ（英語）では、以下の説明が掲載されています。 キーボードハプティクス：心地よくタイプできるように、キーボードの触覚フィードバックをオンにできます 米メディア9to5Macは、iOS16での初期状態では同機能がオフになっており、ユーザーが「設定」アプリの「一般」＞「キーボード」メニューから有
SwiftUIで一晩で作ったiPhoneアプリのDockアニメーションの動画が話題に - iPhone Mania
SwiftUIでは、Swiftを利用してすべてのAppleプラットフォーム向けに、できるだけ少ないコードで美しいアプリを構築できますが、わずか一晩で作ったというiPhoneインターフェースが注目を集めています。 Dockの中に並んだアプリをスムーズにシフト ユーザーインターフェース（UI）デザイナーのフィリップ・デイヴィス氏（@philipcdavis）は、SwiftUIで昨夜作ったというiPhoneインターフェースのデモ動画を公開しました。 Here’s a magnification effect I made last night in SwiftUI. It would be interesting to see something like this used to enable more apps in the dock. pic.twitter.com/1ptMQv3GI5
iPhone12 Pro Maxは人間工学をいっさい考慮していない？怒りの声に同意も - iPhone Mania
iPhone12 Pro Maxは人間工学をいっさい考慮していない？怒りの声に同意も 2021 7/19 iPhone12シリーズの最上位モデルiPhone12 Pro Maxは、ここ10年間で最悪のデザインの大型携帯電話だ、との投稿に注目が集まっています。 サイズの利点が活かされていない？ スマートフォン関連ツイートの多いRushil氏（@TackyTechie）は、「iPhone12 Pro Maxは過去10年間発売された中で、最悪のデザインの大きな携帯電話だ」と投稿しました。同氏は続けて「シャープなエッジに、古びたソフトウェアデザイン、そして人間工学をいっさい考慮しておらず、片手での使用は不可能」とも述べています。 iPhone 12 pro max is the worst designed big phone of the decade. Sharp edges, ancient
iOS14ではiPhoneでもiPad風マルチタスクが利用可能に、Apple内部ビルドが流出 - こぼねみ
「iOS 14」のApple内部エンジニアリングビルドから、iOS14をインストールしたiPhoneで新たにマルチタスク機能が追加されることをリーク情報で知られるBen Geskin氏と91mobiles.comが画像やビデオを公開しています。 一見すると、iPhoneの画面で確認できるのはiPadに搭載されているようなマルチタスク画面です。 ビデオではiPhone11 Pro Maxで動作しているiOS14の内部ビルドの様子を確認できます。 アプリはマルチタスクビューに非常にすばやく表示され、すぐに閉じることもできます。一度に合計4つのアプリを画面に収めることができ、指を右にスワイプするとさらに多くのアプリが利用可能になります。 ビデオを注意深く見ると、アプリを下にスワイプするとロックおよびロック解除されます。その目的が現時点では明確ではありませんが、ロックされているアプリが固定され、マ
iOS 14のiPhoneマルチタスク画面がリーク、iPadOSと同じに？
When you swipe the app down, screen goes darker and it shows the lock above it, it locks and unlocks as you swipe down. Don’t know exactly what it will do, but I guess this might pin the app on the multitasking screen pic.twitter.com/5BhpoWd0k3 — Ben Geskin (@BenGeskin) February 23, 2020 あれれ、なんかどこかで見たような。。はい、iPadOSのマルチタスク画面でもありますが、もっと昔にも見たような。。はい、そうです！このブログを昔からご覧の方はご存じの通り、脱獄Tweakですね。 ちなみにiOS 14ベータ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
スマホの「フリック入力」から日本が見えてくる【西田宗千佳のイマトミライ】
iPhoneユーザーの人はキーボードの【空白】を長押ししてみて「革命が起きた」「ストレスが緩和される」
Engadget | Technology News & Reviews
Engadget | Technology News & Reviews
TechCrunch | Startup and Technology News
