apple stories
今年のSwift Student Challenge、AIをアクセシビリティに活用
プレゼンテーションを行いながらリアルタイムのフィードバックを受け取る。アクラで洪水區(qū)域から避難する。物理的な楽器なしでヴィオラを演奏する。震えを心配せずにiPadで絵を描く。これらは、今年のSwift Student Challengeの優(yōu)秀受賞者が、入賞アプリプレイグラウンドで生み出した解決策のうちのわずか4つです。
毎年恒例のSwift Student Challengeは、Appleの覚えやすいSwiftプログラミング言語を使って構(gòu)築するオリジナルのアプリプレイグラウンドを通じて、自分のアイデアに命を吹き込むよう、世界中の學(xué)生に呼びかけています。今年の350の入賞者は37の國と地域から集まり、幅広いテクノロジーを紹介しています。
「Swift Student Challengeで目の當(dāng)たりにするクリエイティビティの広がりには、いつも驚くばかりです。今年の入賞者は、Appleのプラットフォーム、Swift、AIツールのパワーを利用して、技術(shù)的に素晴らしいと同時(shí)に有意義なアプリプレイグラウンドを構(gòu)築する驚くような方法を見つけました。私たちは彼らの歩みを支援できることをとても誇りに思います。彼らが次に何を作り出すのかを見るのが待ちきれません」と、Appleのワールドワイドデベロッパリレーションズ擔(dān)當(dāng)バイスプレジデントであるスーザン?プレスコットは述べています。
50名の優(yōu)秀受賞者は、6月にApple Parkで開催されるWorldwide Developers Conference（WWDC）に招待され、厳選された3日間の體験に參加します。1週間を通じて、學(xué)生たちは基調(diào)講演をライブ視聴したり、Appleのエキスパートやエンジニアから學(xué)んだり、実踐的なラボに參加したりする機(jī)會があります。
今年の入賞者の多くは、自分のコミュニティから、あるいはキッチンテーブルでの會話からインスピレーションを得て、アクセシビリティを中核に據(jù)えた素晴らしいアプリを作り上げました。以下に紹介する優(yōu)秀受賞者のGayatri Goundadkar、Anton Baranov、Karen-Happuch Peprah Henneh、Yoonjae Joungは、自分のアプリプレイグラウンドと自分が解決しようとしている現(xiàn)実世界の問題を掘り下げて、持続的な変化を促すアプリ開発の力を?qū)g証しています。
Steady Handsでアートをもっとアクセシブルに
20歳のGayatri Goundadkarは、インドのプネーで祖母と一緒に絵を描いて育ちました。2人は、基本的な幾何學(xué)図形を使うことで知られる、何世紀(jì)にもわたる蕓術(shù)形式であるワルリー畫への情熱を共有していました。しかし、Goundadkarの祖母は歳を重ねるにつれて手が震えるようになり、日々の習(xí)慣に參加できなくなりました。Goundadkarはその喪失感を抱き続け、これがApple Pencilの安定化機(jī)能を使って震えの癥狀がある人をサポートするアプリプレイグラウンド、Steady Handsを構(gòu)築するきっかけとなりました。
「私の主な対象者は高齢者です」と、MITワールドピース大學(xué)のコンピュータサイエンス専攻の3年生で、大學(xué)でアプリ開発プログラムに參加しているGoundadkarは説明します。「インドでは特に、その世代の人々はテクノロジーに気後れすることがあるので、それを念頭に置いてあらゆることを決めました。インターフェイスは、殺風(fēng)景なものではなく溫かみを感じられるものにする必要がありました。アプリを開いて途方に暮れたり圧倒されたりする人がいないようにしたいと思いました。自分のために作られているように感じてほしかったのです」
ユーザーがこのアプリで自由に描けるようになるために、Goundadkarは、震えについて、また、それがiPadのタッチスクリーン操作にどう影響するかについて理解する必要がありました。彼女は、タッチ調(diào)整などのAppleのアクセシビリティ機(jī)能からインスピレーションを得て、SwiftUIの概念を?qū)Wぶことから始め、AnthropicのClaudeを使って、PencilKitがストロークデータを扱う方法などのトピックを理解するのに役立てました。また、ユーザーの震えを特徴づけるため、彼女は、iPadとApple Pencilからの未加工のモーションデータを分析するツールを構(gòu)築しました。このツールは手の動きをキャプチャし、信號処理技術(shù)を適用してユーザーの震えの頻度と強(qiáng)さを特定します。
「絵を描くと、私のアプリはAppleのPencilKitとAccelerateのフレームワークを使ってストロークデータを分析し、震えを認(rèn)識します。意図的なものとそうでないものを検出して、震えの要素を取り除きます。すべての絵は、そのあと、パーソナルな3Dミュージアムに表示されますが、これは自分を患者ではなくアーティストのように感じてほしいからです。ユーザーは、安定化がうまくいっているのを見ると、もっと自信が持てます」と彼女は言います。
pitch?coachでプレゼンテーションを仕上げる
22歳のAnton Baranovが、ドイツのフランクフルトで家族のキッチンテーブルに座っていた時(shí)、言語學(xué)と文學(xué)の教授である彼の母親が話した一言に衝撃を受けました。
「彼女は、自分の學(xué)生は非常に有能だけれど、何かのプレゼンテーションをしている時(shí)に、固まってしまうことがあると言いました。彼らは言葉を失い、前かがみになり、アイデアを共有できないのです」とドイツのミッテルヘッセン工科大學(xué)でコンピュータサイエンスを?qū)煿イ工隑aranovは述べています。それが、pitch coachという、Baranovが「Apple Intelligenceを活用した『Shark Tank』ピッチの助っ人」と表現(xiàn)するアプリが誕生した瞬間でした。
16歳でプログラミングを始めたBaranovは、昨年8月に初めてSwiftを使い、2月にpitch coachを構(gòu)築しました。彼は初期バージョンを母親の學(xué)生のところに持って行き、具體的な課題を発見しました。それは、學(xué)生はどこで失敗したかわかっているものの、事が起こってからしか間違いに気づかないということです。「ある學(xué)生が私に『プレゼンテーション中に自分を見られたらいいのに』と話したのです」とBaranovは思い出します。「それがまさに、リアルタイムのフィードバックとAirPodsの姿勢追跡がアプリの中核になったきっかけです」
ユーザーを?qū)Гい匹抓欹讥螗譬`ションの不安を乗り越えられるようにするため、BaranovはAppleのFoundation Modelフレームワークを活用して、各セッションのあと、パーソナライズされコンテキストに即したフィードバックと概要を生成し、「えっと」や「あのー」のような會話の間を埋めるつなぎ言葉に注意するようユーザーに呼びかけます。彼はまた、Xcode 26でClaude Agentを使ってアプリを20の言語に翻訳し、友人や同僚と相談して、ほかの言語のつなぎ言葉を特定するのに役立てました。
Baranovは3月上旬にApp Storeでpitch coachをリリースし、以來、オーガニックダウンロード數(shù)は6,000以上にのぼっています。このアプリのユーザーの多くは、プレゼンテーションの練習(xí)のためにこのアプリを使っていますが、Baranovは、ラップパフォーマンスやお笑いのネタの練習(xí)という、彼を笑わせた一部の使用事例について述べています。「ユーザーがアプリを定義するので、彼らがある用途のためにこのアプリを気に入ったなら、その用途で使えます」と彼は言います。
Asuoで洪水區(qū)域からの安全な避難経路を見つける
Karen-Happuch Peprah Hennehは、今年Swiftを?qū)Wんだばかりです。祖國ガーナでコンピュータサイエンスと情報(bào)テクノロジーの學(xué)士課程を修了したあと、プログラミングの機(jī)會があまりなかったため、Hennehはアニメーションに集中しました。その傍ら、FigmaとHTML5を?qū)Wび、現(xiàn)在はカリフォルニア美術(shù)大學(xué)でインタラクションデザインの修士號取得に取り組んでいます。
彼女は、洪水の多いコミュニティのために、入賞アプリプレイグラウンドのAsuoをデザインしました（「Asuo」は、ガーナで広く話されているトゥイ語で「流水」を意味します）。Asuoは洪水區(qū)域の人に安全なリアルタイムの経路を提供し、実體験、つまり2015年にアクラを襲い、連鎖的に被害が拡大した破壊的な洪水にもとづいています。
「國中が喪に服していたので、あの體験は本當(dāng)に忘れられません。私は、もし機(jī)會があるなら、まず最初に雨の強(qiáng)さを計(jì)算でき、これまでの洪水データにもとづく経路発見アルゴリズムを使うアプリを構(gòu)築しようと決めました」とHennehは言います。
Asuoを作る上で、Hennehはこのデータすべてを同期しなければならないだけでなく、誰もが使えるようにする必要もありました。「アクセシビリティは、あとから考えたのではなく、最初から主要な検討事項(xiàng)でした。危機(jī)の中で、誰一人として、障がいや制限を理由に取り殘されてはいけません」と彼女は言います。
このアプリのインタラクティブ要素にはVoiceOverラベルとヒントがあるため、視覚に障がいのあるユーザーはすべての畫面を操作できます。Hennehは、AVSpeechSynthesizerを使ったカスタムの音聲アラートシステムも構(gòu)築し、ユーザーはスピーカーボタンでこれをオンに切り替えることができます。
FigmaでAsuoのインターフェイスをデザインしたあと、Hennehは、アプリの起動畫面に表示される降雨シミュレーターのデザインとA*経路探索アルゴリズムの実裝について、Claudeに支援を求めました?！杆饯膝钎顶ぅ施`なので、高度に技術(shù)的な部分にはあまり踏み込んでいません。それについてはAIエージェントの支援を頼りました。何か月もかかったかもしれないことを、3日から4日でできました」と彼女は話します。
所屬するNPOのRadiance Girl Africaを通じて、Hennehは、University of Education in GhanaおよびUniMACを含むいくつかの學(xué)校で、若い女性にテクノロジーやアートで成功できる力を與えることを目的としたディスカッションとワークショップを主導(dǎo)しました?！弗钎弗骏敫癫瞍戏浅￥嗣靼驻扦埂￥长欷椁稳恕─味啶?、幼い頃にコンピュータに觸れる機(jī)會がありませんでした。テクノロジーが解決できる問題はたくさんありますが、私と同じような場所出身の人たちが設(shè)計(jì)に攜わっていなければ、追いついてそれを?qū)Wぶのは少し難しいです。私は社會的に疎外されたコミュニティの人々のためにデザインします」とHennehは言います。
LeViolaで音楽教育を民主化する
コンピュータサイエンスを?qū)煿イ筏皮い?1歳のYoonjae Joungは、ニューヨーク大學(xué)での交換プログラムに向けて荷造りをしている時(shí)、スーツケースに自分のヴィオラを入れることができませんでした。しかし、ニューヨークフィルのコンサートに行ったあと、彼は自分の楽器が戀しくなり始めました。その時(shí)、彼は、ヴィオラの習(xí)得と演奏をもっとアクセシブルにするためにデザインされたアプリプレイグラウンド、LeViolaを作ろうと思いつきました。
Joungは、10代の頃に韓國のソウルで教室の電子機(jī)器を制御するタイマーを作成したり、最近、一人暮らしの高齢者向けにAIコンパニオンデバイスを開発したりと、長いことプログラミングをしてきましたが、Swiftは初めてでした?！缸苑证问证蚴工盲茦S器を演奏する、カメラオーバーレイを使ってユーザーが弓の持ち方を操れるようサポートする、というアイデアを思いついた時(shí)、どこから始めればよいかわかりませんでした」と彼は言います。このプログラミング言語に習(xí)熟するために、Joungは、OpenAIのCodexとGoogleのGeminiに加えてClaudeも使いました。そのあと、自分のモデルをトレーニングするためにCreate MLで試してから、Core MLを使ってアプリに統(tǒng)合しました。
LeViolaを構(gòu)築しながら、Joungは、オンデバイスの機(jī)械學(xué)習(xí)のためのAppleのフレームワークを最大限に活用することを目指しました。「どの音が押されたのか判斷するために、それらを使って左手の関節(jié)を分析しました。弦楽器とリアルな演奏體験を區(qū)別するため、私は右腕の角度を追跡することにしました」と彼は説明します。
Joungは、楽器の習(xí)得について、始めるための障壁があることをよく理解しています。多くの楽器は場所を取り、レッスンは高額な場合があります?！杆饯稀⑷恕─颏膜胜哎末`ルとしてテクノロジーと関わっています。このアプリは始まりにすぎません。ほかの楽器についても、これを作ることができます。楽器を持っていない人でもクラシック音楽をたしなむことができるようになります。もっと多くの人に、楽器を習(xí)ったりオーケストラを楽しんだりする機(jī)會を持ってほしいと思っています。iPhoneはそのすべてを可能にします」と彼は言います。
そして、Joungは當(dāng)面LeViolaに集中していますが、アートとテクノロジーへの情熱を融合させた別のアプリをすでに考えています?！脯F(xiàn)実世界の人々をつなぐことができるデジタルプラットフォームを作りたいです」と彼は述べています。
Appleは、毎年恒例のSwift Student Challengeプログラムを通じて、次世代のデベロッパ、クリエイター、起業(yè)家を支援できることを誇りとしています。世界中の何千人ものプログラム參加者が、順調(diào)にキャリアを築いたり、ビジネスを立ち上げたり、テクノロジーを誰もが利用できるようにし、それを使ってより良い未來を作ることに注力する団體を設(shè)立したりしています。詳しくはdeveloper.apple.com/jp/swift-student-challengeをご覧ください。
共有
Media
-
記事本文
-
この記事の畫像