文章目錄
OpenAI 推出了令全球矚目的多模態大型語言模型 GPT-4,它能夠理解圖片和文字
然而,目前GPT-4還未對外開放,所以一般人還無法親身體驗它的強大功能
目前ChatGPT-4僅開放給訂閱ChatGPT Plus的用戶試用,每月訂閱費20美金,在聊天時還有提問10次的上限限制
不過先別失望,現在有一個名為MiniGPT-4的專案,可以讓我們提前體驗到GPT-4的圖像對話能力,讓我們一起來看看MiniGPT-4開了眼的AI到底可以做什麼呢?
🦾實用的AI工具推薦
最強AI助理👉ChatGPT
AI網站客服 👉hchatbase
AI說話數字人👉heygen
AI繪圖工具👉Tensor.art
AI製作影片👉Invideo
你知道 GPT-4 可以看圖說話嗎?
GPT-4可以看圖說話,也就是可以分析圖像的內容,讓我們透過圖像就能跟AI對話。
例如,如果給 GPT-4 一張照片,它可以生成一個描述該照片的句子或段落,從而表達出它所看到的內容和特徵。
如果給 GPT-4 一張展示一個人在海邊玩耍的照片,它可以生成一個描述該場景的句子,如“在這張照片中,一個年輕的男子身穿泳衣
在海邊奔跑玩耍,他的臉上洋溢著開心的笑容,陽光照耀著他的皮膚,海浪在他的腳邊拍打著。”
透過這種方式,GPT-4可以更好地理解圖像和語言之間的關聯性,從而提高其自然語言處理的準確性和效率。
關於 GPT-4 我們直接觀看這個影片介紹說明,可以更清楚明白!尤其是最後….他用手繪一個網站模型,然後GPT-4就能把它變成一個網頁。(實在太驚人了)
但是今天我們要來介紹的 MiniGPT-4 就能讓你免費體驗這樣子的功能~話不多說,趕快來介紹MiniGPT-4。
MiniGPT-4 是什麼?
什麼是MiniGPT-4?MiniGPT-4是一個基於開源人工智能模型GPT-4的輕量級版本。
它是基於 GPT-3 的架構和訓練方法,但是使用了更小的模型大小和更少的數據量,因此可以在一般的電腦上運行。
不過,它並不是直接使用 GPT-3 作為語言模型,而是使用了一個叫做 Vicuna 的預訓練語言模型。
據說該機器人可以達到 GPT-4 驅動的 ChatGPT 的90%能力。
當你要求他識別一張圖片中的植物有什麼問題時,MiniGPT-4可以替有病植物的圖片,提供了一個可執行的解決方案。
你還可以餵給 MiniGPT-4 一章產品圖片,請她幫妳寫產品文案、廣告文案,MiniGPT-4還會認人,給他電影或是藝術人物的照片,他會告訴你照片人物是誰,但是它 MiniGPT-4 還不太認識亞洲人,給它日本、韓國藝人的照片,它還認不出來…
MiniGPT-4 的特色
MiniGPT-4有以下幾個特色:
- MiniGPT-4可以根據使用者的問題回答有關圖片的資訊
- MiniGPT-4可以處理多種語言和多種主題的圖像對話
- MiniGPT-4可以讓使用者自由地調整模型的參數,以控制模型的創造性和多樣性
Temperature
回答的方式,數值越大越充滿創意,數值越低則更專注穩定,可設定在 0~1 之間。
beam search numbers
是指在每一個時間步,保留多少個最優的部分解釋
MiniGPT-4 的使用方法?
要使用 MiniGPT-4,直接點選網站https://minigpt4.github.io/
然後上傳一張照片、圖片,然後輸入您想要它的作答對話,並且按下「送出」按鈕。
您也可以按下「重置」按鈕來清除您的輸入和輸出,或者按下「設定」按鈕來調整模型的參數。
但是通常他會想很久,所以你可以按下Enter的同時,繼續你手邊未完成的事情,然後等一段時間後再回來看看她回復你了沒…
MiniGPT-4 的使用方法?
先上傳一張照片,點擊Drop image Here,然後選擇下方的Upload & Start Chat。(然後她會開始畫圈圈跑)
上傳好了之後,在右邊User輸入你想問的問題。
MiniGPT-4 寫產品文案介紹
給它一台「電風扇」照片。目前測試,用英文輸入會得到比較好的回覆,用中文回答的會有點奇怪。
以下是MiniGPT-4的回覆。
This electric fan is a great addition to any room, providing a cool breeze on hot days. It has a sleek and modern design, making it a great addition to any home or office. The fan is easy to use and has a long lasting battery life, making it a great choice for anyone looking for a reliable and efficient fan. The fan is also lightweight and easy to move around, making it a great option for anyone who needs a portable fan. The fan is also energy efficient, making it a great choice for anyone looking to save on their energy bill. The fan is also quiet, making it a great choice for anyone who needs a fan that won’t disturb their sleep or concentration. The fan is also easy to clean, making it a great choice for anyone who wants a fan that is easy to maintain. The fan is also versatile, making it a great choice for anyone who needs a fan for different rooms or settings. The fan is also durable, making it a great choice for anyone who needs a fan that will last for a long time. The fan is also stylish, making it a great choice for anyone who wants a fan that will add to the decor of their room. The fan is also easy to use, making it a great choice for anyone who wants a fan that is easy to operate. The fan is also reliable, making it a great choice for anyone who needs a fan that will work when they need it to.
這款電風扇是任何房間的絕佳選擇,可以在炎熱的天氣中提供涼爽的微風。它擁有流線型和現代化的設計,是任何家庭或辦公室的絕佳裝飾品。該風扇易於使用,並且電池續航時間長,是任何尋求可靠和高效風扇的人的絕佳選擇。該風扇重量輕,易於移動,適合需要攜帶風扇的人。該風扇能耗低,是任何想節省能源費用的人的絕佳選擇。該風扇聲音低,是任何需要不會干擾睡眠或專注力的風扇的人的絕佳選擇。該風扇易於清潔,是任何希望風扇易於維護的人的絕佳選擇。該風扇多功能,是任何需要不同房間或場合使用風扇的人的絕佳選擇。該風扇耐用,是任何需要風扇可以持久使用的人的絕佳選擇。該風扇時尚,是任何希望風扇可以為房間裝飾增添色彩的人的絕佳選擇。該風扇易於使用,是任何希望風扇易於操作的人的絕佳選擇。該風扇可靠,是任何需要風扇可以隨時正常工作的人的絕佳選擇。
在給MiniGPT-4一條「電熱毯」照片。
(這是陷阱題,因為看起來很像棉被,但是旁邊又有控制器,想考考它,看它能不能答對)
以下是MiniGPT-4的回覆。
This is a pink electric blanket with a floral design on it. It is made of soft and comfortable material that will keep you warm during the cold winter months. The blanket is easy to use and can be controlled with a remote control. It is perfect for use in the bedroom, living room or any other room in the house. The blanket is machine washable, making it easy to clean and maintain. It is a great addition to any home and is perfect for keeping warm during the cold winter months.
這是一款粉色的電熱毯,上面有花卉設計。它由柔軟舒適的材料製成,可以在寒冷的冬季保持溫暖。毯子易於使用,可以通過遙控器控制,非常適合在臥室、客廳或家中的任何其他房間使用。毯子可機洗,易於清潔和維護。它是任何家庭的絕佳裝飾品,非常適合在寒冷的冬季保暖。
很可以耶~他知道這個是電熱毯,還知道這毯子可以水洗。
給MiniGPT-4一台咖啡機的配件說明圖,讓它介紹
以下是MiniGPT-4的回覆。
an I write a detailed introduction to the use of the product based on this picture?
可以根據這張圖片,詳細寫出產品使用介紹嗎?
Yes, you can write a detailed introduction to the use of the product based on this image. The image shows a coffee machine with a cup of coffee on top of it. The machine has a stainless steel body and a black handle on the side. The cup is made of white porcelain and has a brown handle on the side. The machine has a spout on the front that is used to dispense the coffee. The cup has a small hole at the bottom that is used to hold the coffee. The machine has a control panel on the front that has several buttons and a display screen. The buttons are used to control the temperature and the volume of the coffee. The display screen shows the current temperature and volume of the coffee. The machine also has a water reservoir on the back that is used to fill the coffee chamber. The reservoir has a small spout on the top that is used to fill the coffee chamber. The machine is designed for use in the home or office and is easy to operate. It is made of high quality materials and is built to last. It is a great addition to any kitchen or office and is perfect for making a quick cup of coffee.
是的,你可以根據這張圖片寫一篇詳細的產品使用介紹。 圖片顯示了一台咖啡機,上面放著一杯咖啡。 該機器具有不銹鋼機身和側面黑色手柄。 杯身為白瓷,邊有茶色提手。 機器前面有一個噴嘴,用於分配咖啡。 杯子底部有一個小孔,用來裝咖啡。 該機器的前面有一個控制面板,上面有幾個按鈕和一個顯示屏。 這些按鈕用於控制咖啡的溫度和體積。 顯示屏顯示咖啡的當前溫度和體積。 該機器的背面還有一個儲水器,用於填充咖啡室。 水庫頂部有一個小噴嘴,用於填充咖啡室。 該機器專為家庭或辦公室使用而設計,易於操作。 它由優質材料製成,經久耐用。 它是任何廚房或辦公室的絕佳補充,非常適合快速沖泡一杯咖啡。
然後我們試試看中文,中文回答得看不太懂,有點怪,怎麼咖啡機變成可以存放飲料跟食物?
所以問問題還是用英文問,然後用翻譯。
以下是MiniGPT-4的回覆。
This is a coffee machine that is designed to make coffee and espresso drinks. It has a hot water tank and two cups for brewing and a milk frother for cappuccinos and lattes. It also has a hot plate for keeping food warm and a storage area for ingredients and beverages. The machine is made of stainless steel and has a sleek and modern design. It is easy to use and clean, making it perfect for both home and commercial use.
這是一款咖啡機,旨在製作咖啡和濃縮咖啡飲料。它有一個熱水箱和兩個沖泡杯,還有一個用於卡布奇諾和拿鐵的牛奶起泡器。它還有一個用於保持食物溫暖的熱板和一個用於存放食材和飲料的區域。該機器由不鏽鋼製成,具有時尚現代的設計。它易於使用和清潔,非常適合家庭和商業用途。
測試結果,就是用英文得到的回覆會更準確。
我們請MiniGPT-4幫我們根據圖片寫一篇部落格推薦文章。
以下是MiniGPT-4的回覆。
幫咖啡機寫一篇blog產品介紹文章。
Sure, here is a sample blog product introduction article:
Introducing the newest addition to our coffee lineup, the [Product Name]. This coffee machine is designed to make coffee and espresso drinks, giving you the perfect cup every time. With its hot water tank and two cups for brewing, you can easily make your favorite coffee drinks at home. The [Product Name] also comes equipped with a milk frother, allowing you to create delicious cappuccinos and lattes.
But that’s not all. The [Product Name] also has a hot plate, perfect for keeping your food warm while you enjoy your coffee. And with a storage area for ingredients and beverages, you’ll never run out of the essentials. The machine is made of stainless steel and has a sleek and modern design, adding a touch of elegance to any kitchen.
Not only is the [Product Name] easy to use, but it’s also easy to clean. This makes it perfect for both home and commercial use. Whether you’re looking to start your day with a fresh cup of coffee or entertain guests with a professional espresso drink, the [Product Name] has you covered.
So why wait? Upgrade your coffee game with the [Product Name] today. You won’t be disappointed.
當然,這是一個示例博客產品介紹文章:
隆重推出我們咖啡系列的最新成員,[Product Name]。 這款咖啡機專為製作咖啡和濃縮咖啡飲品而設計,每次都能為您提供完美的一杯。 憑藉其熱水箱和兩個沖泡杯,您可以在家中輕鬆製作自己喜歡的咖啡飲品。 [產品名稱]還配備了奶泡器,讓您可以製作美味的卡布奇諾和拿鐵咖啡。
但這還不是全部。 [Product Name] 還有一個加熱盤,非常適合在您享用咖啡的同時為您的食物保溫。 配料和飲料的儲物區讓您永遠不會用完必需品。 該機器由不銹鋼製成,設計時尚現代,可為任何廚房增添優雅氣息。
[Product Name] 不僅易於使用,而且易於清潔。 這使其非常適合家庭和商業用途。 無論您是想用一杯新鮮的咖啡開始新的一天,還是想用專業的濃縮咖啡招待客人,[Product Name] 都能滿足您的需求。
那為什麼還要等? 立即使用 [Product Name] 升級您的咖啡遊戲。 你不會失望的。
幫咖啡機寫instagram的貼文
以下是MiniGPT-4的回覆。
Can you help me write a Instagram post that attracts people to watch?
Sure, here is a sample Instagram post that could attract people to watch:
“Get ready to elevate your coffee game with our new [Product Name]! This sleek and modern machine is designed to make the perfect cup of coffee and espresso drinks every time. With its hot water tank and two cups for brewing, you can easily make your favorite coffee drinks at home. And with a milk frother, you can create delicious cappuccinos and lattes.
But that’s not all. The [Product Name] also has a hot plate, perfect for keeping your food warm while you enjoy your coffee. And with a storage area for ingredients and beverages, you’ll never run out of the essentials. The machine is made of stainless steel and has a sleek and modern design, adding a touch of elegance to any kitchen.
Don’t miss out on the chance to upgrade your coffee game. Check out our new [Product Name] now and start enjoying the perfect cup of coffee every time. #coffee #espresso #newproduct #coffeemachine”
當然,這是一個可以吸引人們觀看的示例 Instagram 帖子:
“準備好用我們的新 [Product Name] 提升您的咖啡遊戲體驗! 這款時尚現代的機器旨在每次都能製作出完美的咖啡和濃縮咖啡飲品。 憑藉其熱水箱和兩個沖泡杯,您可以在家中輕鬆製作自己喜歡的咖啡飲品。 使用奶泡器,您可以製作美味的卡布奇諾咖啡和拿鐵咖啡。
但這還不是全部。 [Product Name] 還有一個加熱盤,非常適合在您享用咖啡的同時為您的食物保溫。 配料和飲料的儲物區讓您永遠不會用完必需品。 該機器由不銹鋼製成,設計時尚現代,可為任何廚房增添優雅氣息。
不要錯過升級咖啡遊戲的機會。 立即查看我們的新 [Product Name],每次都開始享用一杯完美的咖啡。 #coffee #espresso #newproduct #coffeemachine”
我們使用ChatGPT ,要輸入一大串的的產品描述、使用對象、功能、特色、產品顏色、要做什麼事…是要寫FB貼文、IG貼文、還是商品文案….等等。要跟ChatGPT講很多話,它才會給我們正確的回答,現在Mini只要給它圖片,然後簡單輸入你要做什麼~~開了眼的 AI 對話起來就是更方便,更明確你的需求。
MiniGPT-4 是否會認人?
上傳一張韓國女星的照片,它只回答我,一個女人穿著黑色衣服,塗著紅色口紅…很顯然他不認識IU
但是我上傳安海瑟薇的照片它就認得了,而且還不用想...
MiniGPT-4 是否可用於料理教學?
我上傳一張料理照片,問它怎麼做?它就回覆我料理方法。
這道菜是用豆腐做的,豆腐是一種豆腐。 它通常作為素菜食用,可以用多種方式烹製,例如炒、烤或烘烤。 要製作這道菜,您需要在平底鍋中加入一些油和香料(如醬油、大蒜和生薑)來煮豆腐。 您還可以在菜餚中添加其他成分,例如蔬菜,以使其更加美味。 豆腐煮熟後,您可以將它和一些蔬菜(如菠菜)一起盛在盤子裡,作為一頓健康美味的飯菜享用。
這道料理太簡單了,我在換一個比較不容易分辨的料理照片。
(這倒是說的有模樣…但是我看起來不用這麼複雜阿…怎麼要準備這麼多東西呢…)
以下是MiniGPT-4的回覆。
How do you make this dish?
To make this dish, you will need the following ingredients:
1 cup of chicken broth
1/2 cup of diced onions
1/2 cup of diced celery
1/2 cup of diced carrots
1/2 cup of diced potatoes
1/2 cup of diced green beans
1/2 cup of diced tomatoes
1/2 cup of diced mushrooms
1/2 cup of diced zucchini
1/2 cup of diced bell peppers
1/2 cup of diced garlic
1/2 cup of diced ginger
1/2 cup of soy sauce
1/2 cup of rice vinegar
1/2 cup of honey
1/2 cup of cornstarch
1/2 teaspoon of salt
1/4 teaspoon of black pepper
1/4 teaspoon of cumin
1/4 teaspoon of nutmeg
1/4 teaspoon of white pepper
1/4 cup of chopped green onions
To make the dish, follow these steps
要製作這道菜,您需要以下配料:
1杯雞湯
1/2 杯洋蔥丁
1/2 杯芹菜丁
1/2 杯胡蘿蔔丁
1/2 杯土豆丁
1/2 杯青豆丁
1/2 杯西紅柿丁
1/2 杯蘑菇丁
1/2 杯西葫蘆丁
1/2 杯甜椒丁
1/2 杯大蒜丁
1/2 杯姜丁
1/2杯醬油
1/2 杯米醋
1/2杯蜂蜜
1/2 杯玉米澱粉
1/2茶匙鹽
1/4 茶匙黑胡椒
1/4 茶匙孜然
1/4 茶匙肉荳蔻
1/4 茶匙白胡椒粉
1/4 杯切碎的蔥
MiniGPT-4 是否可以理解圖表、並寫報告?
以下是MiniGPT-4的回覆
The image shows a circular diagram with four sections labeled with different types of robots. The first section is labeled “Robotics” and has a robot with a wrench in its hand. The second section is labeled “Artificial Intelligence” and has a robot with a brain symbol. The third section is labeled “Machine Learning” and has a robot with a computer symbol. The fourth section is labeled “Deep Learning” and has a robot with a neural network symbol. The image suggests that the robots are being used for different purposes in the fields of robotics, artificial intelligence, machine learning, and deep learning.
該圖顯示了一個圓形圖,其中四個部分標有不同類型的機器人。 第一部分標有“機器人技術”,其中有一個手持扳手的機器人。 第二部分標有“人工智能”,並有一個帶有大腦符號的機器人。 第三部分標記為“機器學習”,並有一個帶有計算機符號的機器人。 第四部分標記為“深度學習”,並有一個帶有神經網絡符號的機器人。 該圖像表明這些機器人在機器人技術、人工智能、機器學習和深度學習領域被用於不同的目的。
Can I write the report based on this picture?
Yes, you can write a report based on this picture. The image provides a clear representation of the different types of robots and their applications in various fields. You can use the information in the image to write a report on the role of robots in different industries and how they are being used to improve efficiency and productivity.
You can also use the image to explain the different types of robots and their functions, and how they are being used in different industries such as manufacturing, healthcare, transportation, and more. Additionally, you can also use the image to explain the advantages and disadvantages of using robots in different industries and how it affects the society and the economy.
It’s important to note that while the image provides a good representation of the different types of robots and their applications, it may not be fully comprehensive and you may need to do further research to provide a more detailed and accurate report.
我可以根據這張圖片寫報告嗎?
是的,你可以根據這張圖片寫一份報告。 該圖像清楚地表示了不同類型的機器人及其在各個領域的應用。 您可以使用圖像中的信息編寫一份報告,說明機器人在不同行業中的作用以及它們如何用於提高效率和生產力。
您還可以使用圖像來解釋不同類型的機器人及其功能,以及它們如何用於製造、醫療保健、運輸等不同行業。 此外,您還可以通過圖像來解釋在不同行業使用機器人的優缺點以及它如何影響社會和經濟。
請務必注意,雖然該圖像很好地展示了不同類型的機器人及其應用,但它可能並不全面,您可能需要做進一步的研究才能提供更詳細和準確的報告。
用中文試試看…
MiniGPT-4可用來分析股票?
以下是MiniGPT-4的回覆
可以幫我分析這一個股票未來走勢嗎?
The image shows a chart with a line graph displaying the price of a stock over time. The line graph shows a steady upward trend in the stock price, indicating a bullish market. The chart also shows a horizontal line indicating the current price of the stock.
Based on this chart, it appears that the stock has been performing well and has been consistently increasing in price over time. This could indicate that the stock is a good investment opportunity. However, it is important to note that past performance does not guarantee future results and it is always important to do your own research and analysis before making any investment decisions.
該圖顯示了一個圖表,其中的折線圖顯示了一段時間內股票的價格。 折線圖顯示股價呈穩步上升趨勢,表明市場看漲。 該圖表還顯示了一條水平線,指示股票的當前價格。
根據這張圖表,該股似乎一直表現良好,並且隨著時間的推移價格一直在上漲。 這可能表明該股票是一個很好的投資機會。 但是,請務必注意,過去的表現並不能保證未來的結果,在做出任何投資決定之前進行自己的研究和分析始終很重要。
僅供參考用,不一定是準確的。只是考驗它看看。
MiniGPT-4可用算數學題 ?
This is a math problem, can you help me solve it
這是個數學題,你能幫我解題嗎
MiniGPT-4似乎看不太懂..是因為中文關係嗎?.因為這一題的答案是12。
MiniGPT-4 懂室內設計擺設?懂風水嗎?
以下是MiniGPT-4的回覆
這個房間的格局,就中國風水學來說有什麼問題?
What is wrong with the layout of this room as far as Chinese feng shui is concerned?
The layout of this room is not in harmony with the principles of Chinese feng shui. The furniture is arranged in a way that blocks the flow of qi, which can lead to negative energy and affect the health and well-being of the occupants. The sofa and chairs are facing each other, which creates a sense of confrontation and tension. The coffee table is in the middle of the room, which creates a sense of clutter and disorganization. The artwork on the wall is not in harmony with the overall design of the room. In Chinese feng shui, it is important to arrange furniture in a way that promotes harmony, balance, and a positive flow of qi.
這個房間的佈局不符合中國風水的原則。 家具的擺放方式阻礙了氣的流動,會導致負能量,影響居住者的健康和福祉。 沙發和椅子相對,營造出一種對抗感和緊張感。 咖啡桌在房間中間,營造出一種雜亂無章的感覺。 牆上的藝術品與房間的整體設計不協調。 在中國風水中,以促進和諧、平衡和氣正流動的方式佈置家具很重要。
它居然懂ㄟ!!
它知道這樣的擺設是錯誤的~沙發不能跟門放一直線~
問他看看怎麼改善
沒錯,回答正確,要移動沙發跟桌子到房間的另一個角落。
MiniGPT-4 懂籤詩嗎?
MiniGPT-4 會修電腦嗎?
結論
MiniGPT-4 的應用非常廣泛,只是目前用英文的回覆最貼合需求。
讓你不用像使用 ChatGPT 要輸入一大串的的產品描述、使用對象、功能、特色、產品顏色、要做什麼事…是要寫FB貼文、IG貼文、還是商品文案….等等。
要跟ChatGPT講很多話,它才會給我們正確的回答,現在Mini只要給它圖片,然後簡單輸入你要做什麼,跟開了眼的 AI 對話起來就是更簡單又明確你的需求。
我希望您喜歡這篇文章,也希望您能夠享受 MiniGPT-4 帶給您的驚喜和樂趣!
👉怎麼用 AI 幫助我們工作?4個免費的 AI 工具網站,除了 ChatGPT 透過「AI工具」讓提高你工作效率