レンズの代わりに AI で写真を撮る Raspberry Pi カメラをチェックしてください

Raspberry Pi カメラについて考えるとき、何が思い浮かびますか? グローバル シャッター カメラ、HQ カメラ、またはカメラ モジュール 3 に接続された Pi ですよね? 2015 年に開発された GIF 作成カメラ Otto a を思い浮かべるかもしれません。そうですね、最新のプロジェクトは、これまでに見たものとは大きく異なります。

Bjørn Karmann によって作成された Raspberry Pi カメラ プロジェクトにはレンズが付属していません。 実際、作者はそれをカメラとさえ呼んでいません。 代わりに、Paragraphica が使用されます。 なぜ奇抜な名前が付いたのでしょうか？ AIを活用して画像を生成！

従来の Raspberry Pi カメラがどのようなものなのか、またどのように機能するのかよく知らないかもしれません。 これらのセットアップの核心は、カメラ センサーを備えた Pi モジュールで構成されています。 写真やビデオをキャプチャできるベアボーン キットを見つけて自分用に構築することができます。

機能に関して言えば、従来の Raspberry Pi カメラは通常、VGA、720p、および 1080p ビデオを撮影できます。 また、Pi の高解像度センサーは高品質の写真も撮影できます。

ただし、機能はモジュールごとに異なります。 ご参考までに、Raspberry から公式に入手可能な Pi カメラ モデルがいくつかあります。 これには、オリジナルの 5MP モジュール、8MP カメラ モジュール 2、および最新のカメラ モジュール 3 が含まれます。これらのモジュールはそれぞれ、以前のモジュールにアップグレードをもたらし、DIY Raspberry Pi カメラを現在のアプリケーションにより適したものにしました。

とはいえ、これらの従来のセットアップでは、接続に Raspberry Pi のカメラ シリアル インターフェイスを利用します。 このバス コネクタは、柔軟なリボン ケーブルと統合されています。 また、セットアップ全体を機能させるには、組み込みターミナルまたは Python (コーディング言語) を使用する必要があります。

つまり、これらの従来のセットアップは基本的に DIY カメラです。 さまざまなプロジェクトに使用できます。 これには、ライブカメラストリーミング、タイムラプス写真、ホームセキュリティモジュールが含まれます。 そして素晴らしいのは、詳細なガイドが大量に用意されているため、初心者でもそのようなプロジェクトに簡単に参加できることです。

一見すると、ビョルン・カルマンによるこのプロジェクトは、単なるクラシックカメラにしか見えないでしょう。 しかし、Raspberry Pi カメラにはレンズの代わりに、ホシバナモグラの鼻のように見える巨大なカバーが付いています。 ビョルン・カルマンはビューファインダーに、AI が生成した画像を取得するための設定を調整できる画面を利用しました。

カメラには一連のダイヤルも付属しており、従来のカメラのパラメータを調整できます。 たとえば、この Raspberry Pi カメラのダイヤルを使用すると、写真のフィルム粒子を調整できます。 AI が生成した画像の鮮明さを調整することもできます。

しかし、魔法が起こるのはキャプチャ ボタンを押したときだけです。 このボタンは AI プログラムを起動し、選択したパラメータに基づいて写真を生成します。

この Raspberry Pi カメラが利用するデータは、さまざまなオープン API からのものです。 これには、場所、時間、日付、近くのランドマークなどの情報が含まれます。 パラグラフイカはこれらの情報をすべて利用して、最終的な写真を処理します。 ご想像のとおり、画像は Text-to-Image AI に依存しています。

さて、この Raspberry Pi カメラが提供する最終的な画像は、通常のカメラから得られるものとは異なります。 パラピカには、目の前にあるかもしれない主題は含まれません。 代わりに、最終イメージには、プロンプトで具体的に提供された情報が含まれます。

言い換えれば、この Raspberry Pi カメラは従来のカメラの代替品ではありません。 結局のところ、リアルタイムでシーンをキャプチャするレンズはありません。 むしろ、自分がいるエリアの AI 生成画像を取得するためのものです。作成者のビョルン カルマン氏は、「カメラは、視覚に限定されない、私たちの周囲の世界を体験する (新しい) 方法を提供します」と述べています。認識だけで。」

プロジェクトを推進するために、ビョルン カルマン氏は Raspberry Pi 4 を利用しました。彼は、コンポーネントを内部に収容するカスタム 3D プリント シェルを作成しました。 パラグラフカでは、ユーザーが入力をカスタマイズできるビューファインダーにタッチスクリーンを利用しています。 位置データを取得するために、このプロジェクトには GPS モジュールが組み込まれています。

ソフトウェアに関して言えば、この Raspberry Pi カメラは Karmann が書いたコードで動作します。 同氏によると、このソフトウェアは Stable Diffusion API と Python を利用して最終イメージを作成しているとのことです。 すべては、開発者が Web アプリを作成するために使用するビジュアル ツールである Noodl を通じて連携して動作します。

パラピカカのご紹介です！ 📡📷位置情報を利用して写真を撮影するカメラ。 あなたがいる場所を説明し、AI が生成した「写真」に変換します。

詳細はこちら: https://t.co/Oh2BZuhRc ここで自分の写真を撮ってみてください: https://t.co/w9UFjckiF2 pic.twitter.com/23kR2QGzpa

— ビョルン・カルマン (@BjoernKarmann) 2023 年 5 月 30 日

プロジェクトの詳細な図とプロセスの内訳は、Karmann の公式 Web サイトでご覧いただけます。 Raspberry Pi で同様のものを作成したい場合は、Karmann の専用のブログ投稿を参照してください。 あるいは、Web サイトを通じてブラウザでソフトウェアを自分でテストすることもできます。 はい、この真新しい体験を味わうのにハードウェアは必要ありません。