The Verge AI·2026年6月13日 21:00·約8分で読める

Apple の新 AI 写真編集ツールは概ね機能するが、善悪両面あり

#Vision AI #Generative Fill #Image Synthesis #Apple Intelligence #Mobile Photography

TL;DR

Apple は iOS 27 ベータ版において、クラウド連携による高精度な「Clean Up」機能や画像拡張・空間再構成機能を導入し、ネイティブ写真編集における AI の実用性を飛躍的に高めた。

AI深層分析2026年6月13日 23:03

重要/ 5段階

深度40%

キーポイント

Cloud-based Clean Up の強化

従来のオンデバイス処理からクラウドの高性能モデルへ移行し、以前の問題だった不自然なアートの痕跡を解消し、実用的なオブジェクト除去を実現した。

画像拡張機能「Extend」の追加

AI を用いて写真の端を拡張し、文脈に合った新しい背景を描き足すことで、構図の変更を可能にする新機能が導入された。

空間再構成「Spatial Reframing」の実装

カメラの位置を変えたかのような視点で画像を再構成する機能だが、その野心的な性質ゆえに技術的な課題や問題点も指摘されている。

Google Pixel との競合状況

今回のアップデートにより Apple の機能が Google の「Magic Editor」に肉薄したが、依然としてネイティブアプリにおける AI 編集の転換点となっている。

影響分析・編集コメントを表示

影響分析

この記事は、スマートフォン業界における AI 写真編集の標準が「オンデバイス処理」から「クラウド連携による高品質生成」へと移行したことを示唆しており、ユーザー体験とプライバシーのバランスを巡る議論を再燃させる可能性があります。また、Apple が自社のエコシステム内で Google のような高度な生成 AI 機能をネイティブに統合したことは、競合他社に対する技術的プレッシャーとなり、業界全体の進化を加速させる重要な転換点となります。

編集コメント

「Clean Up」機能のクラウド移行は、プライバシー懸念と画質向上のトレードオフを象徴する重要な転換点です。ユーザーはより高品質な編集が可能になる一方で、画像処理が外部サーバーで行われることへの認識を深める必要があります。

世界で最も人気のあるカメラに、ついに本格的な AI 写真編集機能が追加されましたが、私たち全員がその準備ができているとは到底思えません。

AI による写真編集の観点から言えば、iOS 27 の新機能は、例えば Google の Pixel スマホで行えることに比べればかなり控えめです。しかし iPhone にとっては、ネイティブの写真アプリで写真に対して何ができるかという点において、転換点を示すものです。つまり memories ということです。もはや何が何だか分かりません。

これらの新機能は現在、iOS 27 の開発者ベータ版に含まれていますので、一般公開されるまで Apple がさらに微調整を行う可能性があることをご了承ください。このアップデートには、3 つ、あるいは「2 つ半」と言えるほどの新しい AI 編集機能が追加されています。そのうち「Clean Up」ツール（写真の背景から写り込んだ人物などを除去する機能）は半分と数えられます。なぜなら、以前から存在していたもののあまりに使い物にならなかったため、実質的にはカウントされなかったからです。このツールは今年、大幅なアップグレードを遂げました。また、「Extend」機能では、AI を用いて画像の端を拡張し、説得力のある填充（フィル）を描き込むことができます。そして「Spatial Reframing」機能は、カメラをシーン内で動かしたかのような効果を実現し、既存の写真の構図を再構成できるようにするものです。これは 3 つの機能の中で最も野心的であり、おそらく最も問題を抱えているものでもあります。

でも、まずは第一に：「クリーンアップ」機能です。実は今では非常に良くなっています。以前はオブジェクトの除去や詳細の補完を端末内のモデルのみで行っていましたが、現在はより強力なクラウド上のモデルも活用できるようになりました。これは Google が何年も前から行っていることであり、同社のマジックエディターツールが昨年 Apple が導入したバージョンよりも遥かに優れていた理由です。完全に端末内だけで動作する以前のクリーンアップ機能は、除去した部分を説得力のある詳細で塗りつぶすのが得意ではなく、奇妙なアーティファクトを残し、全体的に手間がかかる割には価値が低いものでした。クリーンアップ 2.0 は、その役割を果たします。

1/4

AI を用いて写真から不要なものを除去する機能は、私が最も抵抗なく使用できる生成編集ツールです。子供のお鼻の鼻水を消したり、背景に写り込んだ見知らぬ人を削除したりするのに使います。iOS のこの新バージョンではそれらすべてが問題なく実行され、iPhone ユーザーの間で人気を博すると考えています。

複雑さと写真らしさの次のレベルに進むと、Extend という機能が登場します。これは逆方向への切り抜きのようなものです。フレームの端を拡張できる機能で、例えば被写体に構図が窮屈すぎる場合や、少し余裕を持たせたい場合に役立ちます。Extend はこの操作を可能にしますが、どこまでかは制限があります。人物に対する編集は避ける傾向があり、特定の方向でのみ拡張できると表示されることもあります。また、追加する余白もごく少量に限られており、悪用されうる行為を最小限に抑えています。その点は評価できます。Clean Up と同様、その役割を説得力を持って果たします。対称性を求める傾向が強く、通常はうまく機能します。元の画像にはフレーム外にあったラリーカーの一部を追加し、写真内に既に存在するサイドミラーと一致するもう一つのサイドミラーも追加しました。

1/4

例えば Samsung の初期の取り組みのように、写真に何かを無理やり追加しようとするほど積極的ではないようです。ただし、サイドテーブルの上に観葉植物を追加したのを確認しました。それなりに説得力はありますが、*私自身*がそれが実在しない植物であることを知っています。もしその写真を Instagram に投稿したら、違和感を感じるでしょう。

Extend は写真に対して二次元空間で動作しますが、Spatial Reframing（空間再構成）は第三の次元を追加します。これは写真を 3D 風に見せる既存の機能を基盤としており、カメラを物理的に移動し、シーンの視点を切り替えたかのように写真を再構成することを可能にします。ただし、やりすぎはできません — 撮影時に腕を動かすことのできた範囲程度しか移動できません。しかし、このアイデアの本質は、撮影時に構図が完璧でなかった場合でも、それを修正できる点にあります。

正直なところ、これは私の Type A（完璧主義者）的な性質に響きます。自分が撮った写真のほとんどすべてを気に入っていても、「もし少し左に移動して、被写体の前にある気散じになるものを避けていたらどうだろう」と思うことがあります。こうした状況はリアルタイムで常に捉えられるわけではありません。Spatial Reframing はまさにこのような微調整のために設計された機能です。

一見合理的に思えますが、微調整であっても存在論的な混沌を招く余地があります。私は WWDC キーノート後の Apple 役員との技術トークで撮影した写真の構図を変更してみました。私が横に座っていたため、ステージ上の役員の一人は元のショットではほとんど隠れていました。構図を変えると、AI は Craig Federighi の隣に座っている人物をほぼ作り上げてしまいました。

1/6

2 次元空間において次に何が起こるかを予測することは、3 次元空間の場合よりも簡単な問題のように思える。Spatial Reframing と Extend の結果を比較すると、そのことがよくわかる。両者はより奇妙だ。被写体から離れるほど、「再構成」できる余地は少なくなり、AI が生成した部分はより現実的になる。しかし最終的に得られるのは、実際に撮影した写真と微妙にしか変わらない画像であり、そうなると私たちはいったい何をしているのだろうか。

被写体がカメラに近い写真では、状況はさらに奇妙になる。「再構成」の効果はより劇的になり、AI は隙間を埋めるためにより多くの作業を強いられる。セルフィーの視点を切り替えることは可能だが、それは AI が顔の詳細部分をより多く埋め合わせる必要があることを意味し、すぐに不気味の谷現象に陥ってしまう。調整可能な限られた範囲内であっても、顔を少し歪んで「おかしく」見せることがある。存在しないものを創作してしまう傾向も強い。確かに、構成が完璧ではない写真を救済できるのは素晴らしいことのように聞こえるかもしれない。しかし実際には、私はこれを好まない。

⟦CODE_0⟧

これらの AI ツールを使って編集された画像に、AI で加工されたことを示す Synth ID ラベルが付与されるのは、せめてもの慰めです。私が数枚の画像をアップロードした際、Instagram はこの情報を把握しましたが、その情報が表示されるのは、該当する画像の「AI 情報」メニューをタップした場合に限られます。ラベルは現時点では完璧な解決策とは言い難く、より大きな危険性は、誰かがスマートフォンで撮影して投稿した写真に対して通常は信頼できるという認識が急速に失われつつある点にあると考えます。Apple はここにおいて最も大胆なプレイヤーではありませんが、サイドテーブルの上の観葉植物の出所や、誰かが実際に写真のように写っている場所に正確に立っていたかどうかについてさえ疑念を抱かせるだけで、時間が経つにつれて大きな問題に発展し得るのです。

*Allison Johnson 撮影 / The Verge*

6 コメント

この記事のトピックや著者をフォローして、パーソナライズされたホームページフィードで類似の記事をもっと見たり、メール更新を受け取ったりしてください。

Allison Johnson

原文を表示

The most popular camera in the world just got its first set of serious AI photo editing features, and I don’t think any of us are ready.

As far as AI photo editing goes, the new features in iOS 27 are pretty tame compared to what you can do on, say, Google’s Pixel phones. But for the iPhone, they represent a tipping point in what the native photos app allows you to do to your photos. I mean memories. I mean, I don’t know anymore.

These new features are part of the iOS 27 developer beta right now, so bear in mind that Apple may continue making tweaks to them before they’re released to the general public. There are three, or maybe two and a half, new AI editing features in this update. The new Clean Up tool counts as half, because it existed before but was so bad it didn’t really count. That’s the tool that lets you take photobombers out of the background of your photos, and it got a major upgrade this year. There’s also Extend, which lets you expand the edges of your photo using AI to paint in some plausible-looking filler. And there’s Spatial Reframing, which mimics the effect of moving the camera around the scene to let you recompose an existing photo. It’s the most ambitious and maybe the most problematic of the three.

But first things first: Clean Up. It’s actually good now. Instead of only using on-device models to remove objects and fill in details, it can now use more powerful models in the cloud. This is what Google has been doing for years now, and it’s why the company’s Magic Editor tools were miles better than the version Apple introduced last year. That totally on-device Clean Up wasn’t very good at painting in convincing details to replace what it removed. It left weird artifacts and was generally more trouble than it was worth. Clean Up 2.0? It does the job.

1/4

Using AI to remove stuff from photos is the generative editing tool that I’m the least queasy about using. I’ll use it to remove a booger from my kid’s nose or take a stranger out of the background. This new version in iOS does all of that without a problem, and I think it’s going to be popular with iPhone owners.

Stepping up to the next level of complexity and what-is-a-photo-ness, there’s Extend. Think of it as cropping, but in reverse. It lets you expand the edges of your frame, which you might want to do if your composition was too tight on your subject and you want to give it a little more breathing room, for example. Extend lets you do this, but only to a point. It seems to avoid making edits to people, and will sometimes tell you a photo can only be extended in a particular direction. It will only add a little bit of padding, too, which minimizes the kind of shenanigans it can be used for. I appreciate that. Like Clean Up, it does its job convincingly. It seems predisposed to looking for symmetry, which usually works. It added part of a rally car that was out of frame in my original image, adding a side mirror to match the one already in the photo.

1/4

It doesn’t seem as eager to make stuff up to put into your photos as, say, Samsung’s early efforts. But I did catch it adding a potted plant on a side table; it looks reasonably convincing, but *I *know that it’s not a real plant. I’d feel weird about that if I were to put that photo on Instagram.

Extend works with your photo in a two-dimensional space; Spatial Reframing adds a third dimension. It builds on an existing feature that makes your photos look 3D-ish, allowing you to reframe a photo as if you had physically moved the camera and changed your perspective of the scene. You can’t go *too* far with it — only about as far as you could have moved your arm when originally taking the photo. But the idea is that you can fix your framing if you didn’t quite nail it when you took your shot.

Look, this appeals to my Type A nature. Sometimes I’ll love everything about a photo I took, except wouldn’t it be better if I had just stepped to the left to avoid framing something distracting in front of my subject? You can’t always catch that stuff in real time. These are the minor adjustments that Spatial Reframing is designed for.

Seems reasonable, except that there’s room to introduce existential chaos, even with minor adjustments. I tried changing the framing of a photo I took at a tech talk with Apple executives following the WWDC keynote. Since I was sitting off to the side, one of the execs onstage was mostly obscured in the original shot. I changed the framing and the AI kind of made up a guy sitting next to Craig Federighi.

1/6

Predicting what should come next in a two-dimensional space seems like an easier problem than in three dimensions. The results from Spatial Reframing compared to Extend reflect that. They’re weirder. The farther you are from a subject, the less latitude you have to “re-compose,” and the more realistic the AI-generated stuff is. But you end up with an image that’s only subtly different from the actual photo you took, and at that point, what are we doing?

In photos with a subject that’s closer to the camera, things get strange. The effect of “re-composing” is more dramatic, and the AI has to work harder to fill in the gaps. You can change the perspective in a selfie, but that means the AI has more detail it needs to fill in on your face, which gets a little uncanny valley pretty quick. Even within its limited adjustment range, it can make faces look a bit skewed and “off.” It’s more prone to inventing things that weren’t there. Sure, it *sounds* nice being able to rescue a photo from a composition that wasn’t quite right. In practice, I don’t think I like it.

It’s a small comfort that images edited with these AI tools get Synth ID labels signaling that they have been modified with AI. Instagram picked up on this info when I uploaded a couple of images, but only surfaces that information if you tap on the “AI Info” menu for that image. Labels aren’t exactly an airtight solution right now, and I think the bigger danger is the quickly eroding notion that we can usually trust a photo that someone takes and posts from their phone. Apple is certainly not the most audacious player here. But even introducing a little bit of doubt about the provenance of a houseplant on a side table, or whether someone was indeed standing exactly where they appear to have taken a photo from, can add up to a lot of trouble over time.

*Photography by Allison Johnson / The Verge*

6 Comments

Follow topics and authors from this story to see more like this in your personalized homepage feed and to receive email updates.