Seamlessのブックマーク (817)

  • GPT-4がマインクラフトをプレイしたら? 自動プレイするAIモデル「Voyager」 NVIDIAなどが開発

    米NVIDIA、米カリフォルニア工科大学、米テキサス大学オースティン校、米スタンフォード大学、米アリゾナ州立大学に所属する研究者らは、GPT-4を搭載し、Minecraftを学習しながら自動プレイするAIモデルを提案した研究報告を発表した。

    GPT-4がマインクラフトをプレイしたら? 自動プレイするAIモデル「Voyager」 NVIDIAなどが開発
    Seamless
    Seamless 2023/06/02
    キャラや環境の状態等を考慮したプロンプトを生成。プロンプト160回で新規アイテム63個(ダイヤモンドツール含む)を取得。AutoGPTより3倍以上早い。なぜ間違えたかの反省も学習。
  • 脳で考えた“歩け”を脊髄に無線送信 下半身不随の男性が歩行に成功 脳と脊髄に電子機器を埋め込む

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 スイス連邦工科大学ローザンヌ校(EPFL)などに所属する研究者らが発表した論文「Walking naturally after spinal cord injury using a brain-spine interface」は、脳と脊髄を直接つなぐBrain-Spine Interface(BSI)を提案した研究報告である。脳と脊髄の2カ所に埋め込んだ電子機器により、脳活動から取得した電気信号を脊髄に伝送して刺激を与えることで筋肉を活性化させる。 12年前に事故で首の骨を折って脊髄を損傷し、下半身不随となった40歳のゲルト・ヤン・オスカムさんは、今回

    脳で考えた“歩け”を脊髄に無線送信 下半身不随の男性が歩行に成功 脳と脊髄に電子機器を埋め込む
    Seamless
    Seamless 2023/06/02
    脳と脊髄に埋め込んだ電子機器により脳活動で取得の電気信号をリアルタイムに脊髄に無線伝送し刺激を与え足の筋肉を活性化。12年間下半身不随の男が補助器具ありで歩行できた。
  • スマホの指紋認証を解除する攻撃 専用機器と大量の指紋サンプルで連続アタック 中国チームが発表

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 中国のTencentと浙江大学に所属する研究者らが発表した論文「BrutePrint: Expose Smartphone Fingerprint Authentication to Brute-force Attack」は、市販のスマートフォンの指紋認証を解除する攻撃を提案した研究報告である。 この攻撃は、物理的にスマートフォンのスキャン箇所に専用機器を設置し、大量の指紋サンプルを連続で試して解除する、ブルートフォースアタック(総当たり攻撃)を実行する。そのために、連続で指紋認証に失敗した際にロックがかかる機能をあらかじめ解除する、脆弱性をついた攻撃

    スマホの指紋認証を解除する攻撃 専用機器と大量の指紋サンプルで連続アタック 中国チームが発表
    Seamless
    Seamless 2023/05/31
    スマホスキャン箇所に専用機器(15$)を設置し大量の指紋(学術DBや漏洩から収集→AIで加工)を連続で試し解除。連続認証失敗でロックされる機能を脆弱性から事前解除で無制限に。
  • 薬物を時間差で放出する“奇抜な形の錠剤” 3Dプリンタで印刷 米国とドイツの研究者らが開発

    薬物を時間差で放出する“奇抜な形の錠剤” 3Dプリンタで印刷 米国とドイツの研究者らが開発:Innovative Tech 米UC DavisとドイツのMPI for Informaticsに所属する研究者らは、薬物を時間差で放出する錠剤の作り方を提案した研究報告を発表した。放出具合から逆算した形状を3Dプリンタで造形することで作り出す。

    薬物を時間差で放出する“奇抜な形の錠剤” 3Dプリンタで印刷 米国とドイツの研究者らが開発
    Seamless
    Seamless 2023/05/31
    どれくらいの時間をかけて体内で溶解していくかの放出具合から逆算した形状(経口投与の錠剤)を3Dプリンタを造形。 少量ずつ投与などができる。
  • “ダークウェブ”を学習した大規模言語モデル「DarkBERT」 韓国の研究者らが開発

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 韓国のKAISTとS2W Inc.に所属する研究者らが発表した論文「DarkBERT: A Language Model for the Dark Side of the Internet」は、ダークウェブに特化した大規模言語モデルを提案した研究報告である。 ダークウェブは、Googleなどの一般的なWeb検索エンジンにはインデックスされず、通常のWebブラウザではアクセスできないインターネットの一部である。ダークウェブにアクセスするためには、Tor(The Onion Router)などの特別なソフトウェアが必要で、匿名性の高い利点から違法な取引、例

    “ダークウェブ”を学習した大規模言語モデル「DarkBERT」 韓国の研究者らが開発
    Seamless
    Seamless 2023/05/29
    ダークウェブとはGoogle等の検索に表示されないWeb。匿名性が高く個人情報や違法薬物の売買等がされている。今回ダークウェブだけで学習させた言語モデルを開発。怪しい動きの検出に役立てる。
  • 脳活動から見ている映像を復元する技術「Mind-Video」 シンガポールと香港の研究者らが開発

    脳活動から見ている映像を復元する技術「Mind-Video」 シンガポールと香港の研究者らが開発:Innovative Tech シンガポール国立大学と香港中文大学に所属する研究者らは、脳活動から見ている映像を復元する手法を提案した研究報告を発表した。磁気共鳴機能画像法(fMRI)で取得した脳活動から高品質な動画を再構成する。

    脳活動から見ている映像を復元する技術「Mind-Video」 シンガポールと香港の研究者らが開発
    Seamless
    Seamless 2023/05/29
    fMRIで取得の脳活動から見ている2秒間の映像(6フレーム)を再構築。
  • 音楽から3Dアバターのダンスを高品質に自動生成するAI スウェーデンの研究者らが技術開発【研究紹介】

    音楽から3Dアバターのダンスを高品質に自動生成するAI スウェーデンの研究者らが技術開発【研究紹介】 2023年5月26日 山下 裕毅 先端テクノロジーの研究を論文ベースで記事にするWebメディア「Seamless/シームレス」(https://shiropen.com/)を運営。 スウェーデン王立工科大学(KTH Royal Institute of Technology)に所属する研究者らが発表した論文「Listen, denoise, action! Audio-driven motion synthesis with diffusion models」は、音声から3Dアバターの動きを自動生成する学習モデルを提案した研究報告である。さまざまな音楽に合わせたダンスモーションの生成品質は非常に高く、これまでのモーション生成モデルを凌駕している。 keyboard_arrow_down 研

    音楽から3Dアバターのダンスを高品質に自動生成するAI スウェーデンの研究者らが技術開発【研究紹介】
    Seamless
    Seamless 2023/05/26
    音楽を入力に3Dアバターの高精度ダンスを生成する拡散モデル。音楽に合わせた格闘技の動作も。鳥やゾンビの真似をしながら歩くことも可能。
  • バーチャルキーボードを打ち込む際の“頭の動き”から入力単語を特定する攻撃

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 米カリフォルニア大学リバーサイド校に所属する研究者らが発表した論文「Going through the motions: AR/VR keylogging from user head motions」は、VR/AR内のバーチャルキーボードを操作する際のユーザーの頭部の動きからタイピングしている単語や文字を予測する攻撃を提案した研究報告である。 今回の方法は、頭部の移動でキーの位置決めを行うタイピング方法ではなく、指だけでタイピングする際の頭の動作データのみで特定する。バーチャルキーボードを入力する際にユーザーの頭が微妙に動く現象を利用している。 この

    バーチャルキーボードを打ち込む際の“頭の動き”から入力単語を特定する攻撃
    Seamless
    Seamless 2023/05/25
    VR/ARバーチャルキーボードを操作するユーザの頭の動きだけからタイプする単語,文字を予測,個人情報盗む。頭部モーションは悪意あるバックグラウンドアプリが特別な権限なしに取得可能な為攻撃できる。
  • 触感を脳に直接送る電子皮膚 ラット実験に成功 米スタンフォード大などが開発

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 米スタンフォード大学と韓国の慶尚大学校に所属する研究者らが発表した論文「Neuromorphic sensorimotor loop embodied by monolithically integrated, low-voltage, soft e-skin」は、外部の温度や圧力を測定できる、皮膚に貼る柔軟で伸縮性が高い電子皮膚を提案した研究報告である。感知した信号を電気信号に変換して脳に伝達することで、着用者が圧力やゆがみ、温度変化を感じられることを目指す。

    触感を脳に直接送る電子皮膚 ラット実験に成功 米スタンフォード大などが開発
    Seamless
    Seamless 2023/05/25
    指先などに貼るシールのような薄い電子皮膚で感知(触る,温度など)した信号を電気信号に変換し直接脳に伝達,着用者が圧力,ゆがみ,温度を感じ取れる。
  • スマホの充電器から“人間のような音声”を発声、音声アシスタントにこっそり入力するサイバー攻撃

    「SINGATTACK」と呼ぶ今回の攻撃システムを実現するには、変調した電流から音声アシスタントが反応する自然言語に変換しなければならない。そのため、変調した電流とスイッチング電源から発する音の関係をモデル化するための強化学習モデルを導入する。 このモデルでは、あらかじめ収集した被害者の音声サンプルを用いて、被害者の音声サンプルと一致する人間に近い合成音声が出力されるように学習する。学習が済んだモデルで生成した電力成分を電力網から注入することで、スイッチング電源を介して悪意ある音声コマンドを出力する。 この攻撃はハードウェアの改造を必要としないことや、電力網から攻撃信号を送れるため遠距離からの攻撃を可能にする利点を持つ。 実験では、収集した被害者の音声サンプルとSINGATTACKシステムを介して出力した合成音声の類似度を比較した。その結果、攻撃を成功させるのに十分な忠実度を示した。 また

    スマホの充電器から“人間のような音声”を発声、音声アシスタントにこっそり入力するサイバー攻撃
    Seamless
    Seamless 2023/05/23
    攻撃信号を電流に変調し電力網を介して電化製品(PC,TV,充電器等)に内蔵のスイッチング電源に注入。スイッチング電源から合成音声コマンドを発声させ音声アシスタントを制御する。
  • 頭蓋骨に穴を開けて挿入するタコ風小型ロボ 中に入って伸びる6本の柔らか足センサーで脳を監視【研究紹介】

    頭蓋骨に穴を開けて挿入するタコ風小型ロボ 中に入って伸びる6の柔らか足センサーで脳を監視【研究紹介】 2023年5月23日 山下 裕毅 先端テクノロジーの研究を論文ベースで記事にするWebメディア「Seamless/シームレス」(https://shiropen.com/)を運営。 スイス連邦工科大学ローザンヌ校(EPFL)に所属する研究者らが発表した論文「Deployment of an electrocorticography system with a soft robotic actuator」は、脳のモニタリング用に頭蓋骨に穴を開けて挿入するソフトロボットを提案した研究報告である。中に入ってから折りたたみ式の平らで柔軟なセンサー6を伸ばして脳の皮質上に設置することで、脳活動を記録する。 ▲提案するソフトロボットは頭蓋骨内に入ってから平らなセンサー6を開いて伸ばす 皮質脳波(

    頭蓋骨に穴を開けて挿入するタコ風小型ロボ 中に入って伸びる6本の柔らか足センサーで脳を監視【研究紹介】
    Seamless
    Seamless 2023/05/23
    足センサーを畳んで小さな穴から頭蓋骨内に入れ中で螺旋状に柔軟な足を展開し脳の皮質上に電極を配置。皮質脳波(ECoG)で信号を記録。実際に豚に挿入し脳活動の記録に成功。
  • 工場出荷前に数百万台のスマホがすでにマルウェアに感染 Trend Microが発表 安価なAndroid端末が対象

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 スマートフォンの製造業界では、多くの企業が別の企業に委託してOEM(Original Equipment Manufacturer)で端末を製造している。メリットも多いが、リスクもある。 主な脅威の一つは、製造委託先の企業が製造工程で攻撃者に侵入される可能性があることだ。製造工程にアクセスされ、出荷前の端末に悪意のあるコードを仕込まれる。 攻撃者の目的は、仕込んだマルウェアを使って個人情報や機密情報などを盗み出し、収集した情報を悪意者に提供して利益を得ることなどである。 購入する一般ユーザーからすると、新品を購入したにもかかわらず感染端末をつかまされる

    工場出荷前に数百万台のスマホがすでにマルウェアに感染 Trend Microが発表 安価なAndroid端末が対象
    Seamless
    Seamless 2023/05/23
    出荷前端末にマルウェア仕込み個人/機密情報を盗み売る。主に東南アジアと東ヨーロッパ。攻撃の背景は安価なスマホの登場でサプライヤーの利益減からと分析。
  • スマホの“カメラ部品の揺れ”から周囲の音を盗聴する攻撃 マイクは不要 米国の研究者らが実証

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 米ミシガン大学、米フロリダ大学、米ノースイースタン大学に所属する研究者らが発表した論文「Side Eye: Characterizing the Limits of POV Acoustic Eavesdropping from Smartphone Cameras with Rolling Shutters and Movable Lenses」は、音波によって揺れるスマートフォンのカメラ部品から音声を復元する研究報告である。 スマートフォンのマイクにアクセスできない場合でも、スマートフォンアプリを使用して音声を盗聴できる方法となる。 膜を前後に素早

    スマホの“カメラ部品の揺れ”から周囲の音を盗聴する攻撃 マイクは不要 米国の研究者らが実証
    Seamless
    Seamless 2023/05/22
    音が空気中を伝搬しスマホにぶつかると微小に振動する。カメラONにしておくとカメラの部品(可動レンズ等)が揺れ画像が揺れる。この揺れから学習モデルで元の音声に変換し盗聴する。
  • 音声変換した声の“元の声”を復元する技術 中国の研究者らが開発

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 中国の浙江大学と武漢大学に所属する研究者らが発表した論文「Catch You and I Can: Revealing Source Voiceprint Against Voice Conversion」は、音声変換技術によって処理した音声から、ソース話者の声紋を復元する手法を提案した研究報告である。 音声合成技術の一つである音声変換は、言語内容を変えることなく、自分の声を別の人に似せることができる技術である。使い方によっては便利な技術だが、悪用されるケースも多々報告がある。例えば、被害者の家族に似せた声に変換してお金を振り込ませたり、社長に似せた声

    音声変換した声の“元の声”を復元する技術 中国の研究者らが開発
    Seamless
    Seamless 2023/05/22
    音声変換技術で処理した音声からソース話者の声紋を復元。9千人以上の話者データで学習。復元した声紋は話者検証・識別システムで95%以上の精度で正しく識別。男女間の変換や未知の言語,電話越しでも頑健。
  • 電子機器を修理サービスに出すのは危険? カナダチームが検証 修理中の全ログ取得、返却後に解析してみた

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 電子機器の修理サービスは、大型から小型店舗まで、さまざまな企業によって提供されている。Geek Squad(Best Buyの技術修理・サービスの子会社)だけでも、年間450万人の顧客にサービスを提供しているという。 これらの企業が提供するサービスの種類には、ソフトウェアのインストールやトラブルシューティング、定期メンテナンス(ソフトウェアのアップデートなど)、データ復旧、ハードウェアの修理などがある。顧客は、PCやスマートフォンなど、さまざまなコンピューティングデバイスでこれらのサービスを利用している。 コンピューティングデバイスのサービスや修理では

    電子機器を修理サービスに出すのは危険? カナダチームが検証 修理中の全ログ取得、返却後に解析してみた
    Seamless
    Seamless 2023/05/19
    不要な時でも機器への全アクセスを要求。修理後のログを調べるとデータを気軽に盗み見るが日常茶飯事の結果。特に露出が高い画像。覗き見の形跡を残さない努力も。
  • 雑に描いたパラパラ漫画をリアルな動画に変えるAI 米カーネギーメロン大が技術開発

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 米カーネギーメロン大学に所属する研究者らが発表した論文「Sketching the Future(STF): Applying Conditional Control Techniques to Text-to-Video Models」は、パラパラ漫画のような連続する絵とテキストプロンプトを入力に、リアルな動画を生成する学習モデルを提案した研究報告である。 例えば、テキストプロンプトに「夕焼けに浮かぶ熱気球」を入れ、手書きで簡易的に描いた気球の絵を3枚を入力に使用する。その際、気球の絵は左から右へ移動するように描く。すると、夕焼けの空を左から右に移動

    雑に描いたパラパラ漫画をリアルな動画に変えるAI 米カーネギーメロン大が技術開発
    Seamless
    Seamless 2023/05/19
    テキストプロンプト「夕焼けに浮かぶ熱気球」と、3つの位置に手で書いた気球の絵を入力。左から右へ移動するリアル動画が生成される。途中のフレームは自動で補完。
  • “13歳少女”のなりすましbotで、子供狙う大人の動向を検証 ほとんどがWebカメラへ誘導

    “13歳少女”のなりすましbotで、子供狙う大人の動向を検証 ほとんどがWebカメラへ誘導:Innovative Tech イスラエルのHebrew University of Jerusalemと米ジョージア州立大学に所属する研究者らは、作成した複数の児童に扮したチャットbot(ハニーポット)に対して大人たちがどのようなアプローチを仕掛けてくるかを調査した研究報告を発表した。

    “13歳少女”のなりすましbotで、子供狙う大人の動向を検証 ほとんどがWebカメラへ誘導
    Seamless
    Seamless 2023/05/18
    13歳少女のチャットbotを複数作成,チャットルームに投入。自称大人とのやり取り953件を記録。Web会議ツールWherebyへの誘導が41%。愛や将来の関係を約束させ勧誘等。画像はやり取りの一例。
  • 割り箸工作のような“木のトランジスタ” スウェーデンの研究者らが開発

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 スウェーデンのリンショーピング大学とスウェーデン王立工科大学に所属する研究者らが発表した論文「Electrical current modulation in wood electrochemical transistor」は、木材から動作するトランジスタが作れることを実証した研究報告である。加工した木材を組み立てて作ったトランジスタは、オン・オフの動作を連続的に機能させたという。 現在のトランジスタはシリコンなどの半導体によって構築されており、スイッチング作用と電流電圧の増幅作用を担っている。数十億個のトランジスタを1つのコンピュータチップに搭載し、

    割り箸工作のような“木のトランジスタ” スウェーデンの研究者らが開発
    Seamless
    Seamless 2023/05/18
    バルサ材を化学薬品に浸してスポンジのように多孔質化,そこに導電性ポリマーを充填。十字になるよう組み立て空洞に電解質ゲルを充填し完成。結果,電流を止めるのに約1秒,再び流すのに約5秒かかった。
  • 床に物が無くなるまで動く全自動お片付けロボット「TidyBot」 どこに何を収納するかは言語モデルで学習【研究紹介】

    床に物が無くなるまで動く全自動お片付けロボット「TidyBot」 どこに何を収納するかは言語モデルで学習【研究紹介】 2023年5月16日 山下 裕毅 先端テクノロジーの研究を論文ベースで記事にするWebメディア「Seamless/シームレス」(https://shiropen.com/)を運営。 米プリンストン大、米スタンフォード大学、米The Nueva School、米Google、米コロンビア大学に所属する研究者らが発表した論文「TidyBot: Personalized Robot Assistance with Large Language Models」は、どこに何を入れるかを各ユーザーの収納スタイルに最適化する全自動お片付けロボットを提案した研究報告である。 床に落ちている物を拾い、目的の場所に入れるタスクを床に物が無くなるまで実行し続ける。空き缶はリサイクルボックスに入れ

    床に物が無くなるまで動く全自動お片付けロボット「TidyBot」 どこに何を収納するかは言語モデルで学習【研究紹介】
    Seamless
    Seamless 2023/05/16
    人それぞれ収納スタイル(収納場所や収納方法)は違う。これらを文章でGPTを学習させ個人に最適化。引き出しを開け入れて閉める。籠に投げて入れる等。未見の物体で精度91%。
  • 動画を見るマウスの脳活動から映像をAIで復元 スイスの研究者ら「CEBRA」開発

    Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: @shiropen2 研究者らは、数匹のマウスに30秒ほどのモノクロ映画クリップを9回見せ、そのときの脳活動データを採取した。 脳活動の収集には、マウスの一次視覚野(視覚情報の処理に関わる脳の領域)に電気パルスを記録するプローブ(針)を挿入して行う。また、一部の脳活動データは、顕微鏡でマウスの脳を撮影することによっても収集する。 見た映像600フレームに関連付けるように開発した「CEBRA」と呼ぶ深層学習モデルで、採取した脳活動データを学習させる。脳信号と映画の特徴をマッピングするわけだ。 実証実験では、10回目の映画クリップを見ているマウスから収集した脳活動データを用い、

    動画を見るマウスの脳活動から映像をAIで復元 スイスの研究者ら「CEBRA」開発
    Seamless
    Seamless 2023/05/16
    30秒600フレームのモノクロ映像をマウスに9回見せプローブを刺した脳から採取した信号と映像をマッピング学習。10回目の脳活動から映像を復元すると95%以上の精度で深層学習モデルが再構築に成功。