課程介紹：

近嶼智能精心設計的多模態大模型應用工程師課程，旨在帶領大家深入探索如何利用最前沿的人工智能技術，將簡單的文字轉化為豐富多彩的多媒體內容，包括文本、圖像、語音、音樂和視頻。課程從基礎的文本生成（文生文）起步，逐步引導大家邁向更高階的視頻創作（文生視頻），采用循序漸進的教學方式，讓大家在輕松愉快的氛圍中掌握圖像、語音、音樂和視頻的創作技巧。

學習內容：

B1 階梯

熟練掌握各種多模態大模型工具（Qwen2-VL，GPT4o，可靈大模型等），完成短視頻文案、劇本創作，視頻剪輯、圖像創作、游戲設計、短視頻生成等工作，實現工作模式的升級和效率的提升。

B2 階梯

學習多模態大模型的通用理論基礎，獲得多模態大模型的高級認知，在MLLM工具使用的基礎上，通過API調用完成批量化創作。

B3 階梯

能夠根據應用需求，借助大模型應用框架，集成語言模型以及多模態模型構建應用，擴展大模型能力。

B4 階梯

針對多模態大模型能力的局限性，對多模態大模型的能力進行可控調優。

課程優勢：

● 雙模式課堂：直播+錄播課程模式

● 線上自習室：騰訊會議線上自習室

● 線下自習室：近嶼智能上海總部提供線下自習室

● 實戰檢測機制：每個學習階段都匹配對應實戰作業

● 全程伴學服務：從入學到學籍期結束提供全程學習輔助及答疑服務

● 專業技術學管多對一技術答疑：多對一專屬學習群，專屬學管技術答疑幫助，針對性答疑更有效

● 多樣化積分獎勵機制：通過學習和積極性行為獲取積分，學習激勵更有效

● 就業面試服務：幫助學員拿到至少5次崗位面試機會，全程匹配簡歷優化及面試指導服務，從此就業不再難

文生文

介紹如何使用開源的Llama、ChatGlm或者閉源的蛙蛙寫作、通義、Kimi等進行AI文本創作，如果你有一些可以模仿的作品集或者自己的歷史作品集，可以通過對開源的Llama、ChatGlm進行微調（SFT），讓大模型生成海量的類似風格的小說、劇本、軟文和廣告腳本等。

文生圖

會用開源的Flux、Stable Diffusion或者閉源的MidJourney進行AI圖片創作，如果你有一些可以模仿的作品集或者自己的歷史作品集，可以通過對開源的Flux或者Stable Diffusion進行微調（SFT），讓大模型生成海量的類似風格的KV、電商詳情頁、海報和字體等。

AI語音生成

用開源的GPTSoVits或者閉源的剪映進行AI語音生成，如果你有一些可以模仿的人物音頻或者自己的歷史音頻集，可以通過對開源的GPTSoVits進行微調（SFT），讓大模型生成海量的類似風格的語音等。

AI音樂創作

用開源的AudioLDM或者閉源的SunoAI進行AI音樂創作，如果你有一些可以模仿的樂曲集、歌曲集或者自己的歷史作品集，可以通過對開源的AudioLDM進行微調（SFT），讓大模型生成海量的類似風格的純音樂或者帶歌詞的歌曲等。

AI視頻創作

用開源的CogVideo或者閉源的極夢、Dream Machine、Runway、Pika進行AI視頻創作，如果你有一些可以模仿的視頻作品集、電影或者自己的歷史作品集，可以通過對開源的CogVideo進行微調（SFT），讓大模型生成海量的類似風格的短視頻。

結合以上的一些或者全部的開源算法，用Langchain等技術框架開發一個集合AI文本創作，文生圖、文生音頻、文生音樂和文生視頻為一體的多模態大模型AI應用，例如：AI自動剪輯軟件筷子科技，非實時數字人合成軟件HeyGen和AI電商廣告生成軟件Fancy Tech等。

就業方向（部分）

多模態算法工程師

平面設計

UI設計

新媒體運營

游戲設計

品牌設計

電商

適合人群：

? 設計與創意行業從業者

○ 原畫師：需要利用AI來增強創作過程，提高效率和創意表現。

○ AI設計師：專注于使用AI工具進行設計工作，創造視覺內容。

○ AI美術師：結合美術功底與AI技術，進行藝術創作和視覺設計。

○ AI視覺設計：利用AI進行視覺設計，包括界面、插畫等。

? 媒體與娛樂行業從業者

○ 剪輯師：通過學習AI技術，提高剪輯效率，實現自動化編輯流程。

○ 娛樂媒體行業從業者：需要掌握AI工具來創作或優化娛樂內容，如視頻、音樂等。

○ AI內容運營：負責管理和運用AI生成的內容，進行有效的內容策略規劃和執行。

? 技術開發人員

○ 多模態應用開發工程師：開發結合多種模態（如視覺、語音、文本）的AI應用。

○ 多模態開發工程師：專注于創造能夠處理和學習多種類型數據的AI系統。

? 市場營銷與商業運營

○ 市場營銷：利用AI進行市場分析、消費者行為預測和個性化營銷內容創作。

○ AIGC內容運營：專注于運營由人工智能生成的內容，包括社交媒體、廣告等。

? 教育工作者

○ 教育工作者：利用AI工具輔助教學，開發個性化學習內容，提高教學效率。

? 新人與轉行者

○ 想進入設計行業的應屆生：對于剛剛畢業、希望進入設計行業的學生，學習AI技能可以增加就業競爭力。

○ 創意設計相關崗位的AI設計師：對于希望結合創意與技術，從事設計行業的人員。

就業指導

就業準備階段

● 確認學員基本信息：了解學員的基礎信息及就業意向和具體要求。

● 制定個性化就業方案：針對學員個性需求，為學員規劃求職方向。

簡歷與面試準備

● 簡歷檢測與修改：針對學員初始版簡歷，指導并輔助學員優化簡歷并制作成品。

● AI模擬面試：提供多次AI模擬面試，豐富學員面試經驗并提升面試表達能力。

● 算法面試指導：課程提供2次算法面試指導直播課程。

面試能力提升

● 面試指導：可針對需面試崗位提供一對一視頻面試指導，包括技術能力溝通反饋。

● 面試技巧：提供面試禮儀與人事溝通技巧。

● 面試復盤：分析面試表現，并將在下一次面試指導中老師針對性給學員進行提升優化。

先行者面試題共享

● 面試題共享學習：提供學長學姐整理的相關真實面試題與資料。

微軟證書

提供免費的考試輔導服務：全面的微軟認證考試準備，包括技術考試流程指導、講師視頻教程、考試題庫等，幫助考生全面掌握考試所需技能和知識點。

結業證書

完成階段課程后頒發，由近嶼智能JYI頒發，行業認可。涵蓋AIGC大模型實戰項目，在近嶼智能JYI的學習旅程中，學員將經歷從基礎到進階，再到實戰的全面訓練，每一步都為學員的專業成長和實際應用能力的提升打下堅實的基礎。

機構優勢：

上海近嶼智能科技有限公司

上海近嶼智能科技有限公司成立于2017年5月，她是一家以AI+RPA+BI技術為核心的人力資源方向的產品和解決方案提供商，擁有基于先進的篇章級語義識別算法和多模態算法構建的人力資源行業超腦-近嶼超腦。近嶼智能致力于通過先進技術，逐步的將人類從繁重、重復的勞動中解放出來，提升人類工作的效能。

其核心產品AI得賢招聘官是一款智慧招聘管理系統，區別于傳統的智能招聘ATS，AI得賢招聘官具有AI多模態算法核心，能夠替代人類面試官對候選人的核心價值觀，通用素質，潛在領導力和專業素質進行基于視頻面試的判斷，是一款L5級別AIGC面試系統。該系統已經被包括三星中國、招商銀行、西門子等眾多大客戶驗證可以完全替代人類面試官進行招聘面試場景的最終決策。

AI得賢招聘官已上架至SAP APP Center，在200個國家和地區，向SAP的全球客戶提供AI招聘和面試科技解決方案。AI得賢招聘官也已登錄釘釘開放平臺，為3000多萬家中小型客戶提供千企千面的招聘自動化、AI視頻面試、模擬編程、認知能力測試、職業性格測試、心理測評等服務。

【機構榮譽】

【融資歷史】

AIGC多模態大模型應用工程師