馬宏江
摘要:人類社會進入信息革命4.0時代,國家把光電子技術產業列為戰略性新興產業,在光電子沒有科學的正式分類1前,本文自行對光電子分成8個門類,同時面對光電子資源匱乏,一些行業資料尚處于商業機密,規劃師如何利用網蟲爬取互聯網數據,展開特定行業的調查研究提供一些參考。
關鍵詞:網絡爬蟲,中國光電子行業分布特征;規劃研究
1項目背景
光電子產業是21世紀的支柱產業,光電子技術不僅全面繼承兼容電子技術,而且具有微電子無法比擬的優越性能和更廣闊的應用范圍。光電子學和光電子技術在信息、能源、材料、航空航天、生命科學及國防軍事領域中得到廣泛應用。在國家實施“一帶一路”戰略的指引下,隨著東部產業轉移,新一輪科技革命和產業變革興起與經濟發展方式轉變,光電子技術產業被國家列為戰略性新興產業。
本文著重介紹第一小組研究方法,規劃師在遵守網絡道德和爬蟲協議(Robots)下,利用網絡爬取技術,對國內光電子信息網頁進行數據收集、分析、整理,并提出國內光電子行業分布特征,為所做玉溪光電子產業園的發展方向和重點、規劃思路和目標提供支撐,也進一步引導省內外光電子產業重點企業向園區集聚,形成拳頭力量,有效拓展玉溪市乃至云南省光電子產業領域,實現產業升級。
2爬取目標導向和路徑
據工信部發布《中國光電子器件產業技術發展路線圖(2018-2022年)》,國家將光電子產業納入國家發展戰略,大力支持光電子產業發展,同時國家加大對光電子芯片共性關鍵技術的研發資金的支持,迅速提高核心器件國產化率,培育具有國際競爭力大企業等。2018年4月26日,國家信息光電子創新中心在武漢烽火科技集團正式掛牌成立。承載著解決我國信息光電子制造業“關鍵和共性技術協同研發,實現首次商業化”的戰略任務。
目標導向有三項:一是摸清中國光電子整體發展情況?二是中國光電子8個行業狀況?三是對于中西部典型地區光電子行業狀況是什么?
爬取路徑:選擇爬蟲、爬取框架、源數據分析處理、IP攔截處理、成果。
3數據分析與成果
3.1數據挖掘技術
通過腳本編程、Web前端、網絡通信、爬蟲框架、網頁解析、數據庫、分布式部署七項構建技術規則。選擇python按照上述規則去抓取網站上設定的有價值信息,并按8類行業門類,從上、中、下游產業分別所處城市里企業進行分析。詳見圖1 技術規則代碼實現模型構建。
3.2源數據分析
選擇EXECL工具,從編號、行業類型、產業鏈、產業類型、分布省份(填寫省份全名)、所在城市(具體到地級市名稱,直轄市直接填寫直轄市名稱,不需具體到區縣、"是否省會城市或教育、科技、經濟發達城市")、屬區域(東部、中部、西部、東北)、公司名稱、詳細信息共8個方面進行挖掘。
遇到多次訪問后IP被網站防火墻攔截,禁止訪問,部分頁面內容利用Ajax技術異步加載,解析值為空,研究小組使用Selenium+webdrive擴展包實現模擬瀏覽器,獲取動態數據,IP代理轉發、動態IP,從而對持續對網絡信息進行挖掘。
3.3分析結論
(1)截止2018年底,全國光電子行業分八大行業,共計8746家企業。(O)LED行業企業數量最多,占比29%;其次激光、光學行業企業數量分列二、三位,分別占比22%和18%。紅外行業和光存儲行業企業數量較少。東部地區企業占比達82%,中部和西部企業數量差別不大,從小范圍來看,東北和臺灣企業分布較為集中。
發現北上廣深四大一線城市在其中所占市場份額是最大。詳見如下八個行業狀況:
3.3.1(O)LED行業狀況
據LED行業上中下游企業地域分布統計表反映出,不論是上游中游還是下游,東部地區企業數量均有絕對優勢。其中(O)LED行業上游呈現芯片生產、輔料及設備企業較多;其次外延材料和發光材料企業也較多。(O)LED行業中游呈現封裝模塊/光源、LED器件企業數量較多,其次驅動IC/控制及電源及封裝材料企業數量也較多。(O)LED行業下游呈現LED顯示、景觀燈飾、半導體照明企業數量較多。
北上廣深四大一線城市加上東莞LED企業數量排前五;深圳LED企業數量遙遙領先;前十名中,珠三角城市占4個,長三角城市占3個。分析“LED行業企業數量前十名城市,分別是深圳936個、上海157個、北京149個、東莞126個、廣州112個、中山94個、杭州58個、杭州58個、寧波53個、廈門49個和蘇州44個。
深圳:具備LED全產業鏈,企業數量在全國范圍內遙遙領先,中下游企業數量明顯多于上游企業數量;其中,上游產品以輔料及設備、以及芯片企業居多;
中游產品主要以LED器件、封裝模塊/光源企業為主,其次封裝材料、封裝機檢測企業也較多;下游產品主要有LED顯示、景觀燈飾為主,其次LED背光源、報道提照明企業數量也較多。
上海:具備LED全產業鏈,企業數量下游企業多于中游企業,上游企業數量相對較少;其中,上游產品以輔料及設備、發光材料、外延材料、以及芯片企業為主;中游產品主要以封裝模塊、驅動IC/控制企業居多;下游產品主要以景觀燈飾和半導體照明企業居多
3.3.2激光行業狀況
北京、深圳、上海、武漢分列前四位,激光企業數量明顯多于其他城市;前十名東部7席、西部2席、中部1席,除廣東占據三席外,其余整體分布相對分散。
北京:具備激光行業全產業鏈,從上游到下游,企業數量遞增;其中,上游產品主要以激光電源及驅動、激光晶體、激光器原件為主;中游產品以半導體激光器、固體激光器、氣體激光器和光纖激光器為主;下游產品主要有打標噴碼、激光檢測、激光醫療/美容居多,其次激光加工、激光切割、激光雕刻企業也有一定數量。
深圳:具備激光行業全產業鏈,從上游到下游,企業數量遞增;整體看,深圳激光企業以下游企業為主,下游企業數量全國最多。其中,上游產品以激光器元件為主,其次也有部分激光燈、激光電源及驅動和激光晶體、設備及包裝企業;中游產品以半導體激光器、光纖激光器和激光模塊為主;下游產品種類豐富,以打標噴碼、激光焊接、激光加工、激光切割、激光演示/展示企業為主。
3.3.3光學行業狀況
上海、深圳、北京分列前三位,激光企業數量明顯多于其他城市;前十名東部8席、西部1席、東北1席;除廣東占據3席外,長三角3席,其余分布相對分散。
上海:具備光學行業全產業鏈,上中下游企業數量無明顯差異;其中,上游產品光學材料/晶體、薄膜及鍍膜產品為主;中游產品以光學元器件、光學鏡片企業居多,其次光傳感及光源、光學鏡頭、光學加工、光學設計也有一定數量的企業。下游產品顯微鏡及顯微系統居多,其次光譜相關、眼視光學、相機相關、望遠鏡等也有一定數量的企業;
深圳:具備光學行業全產業鏈,中有企業居多,上下游企業數量差不多。其中,上游產品以薄膜及鍍膜產品居多,其次光學材料/晶體、光學輔助、加工及鍍膜設備鍍膜材料企業也有一定數量;中游產品以光學鏡頭居多,其次光學鏡片、光學元器件及光傳感及光源企業也有一定數量;下游企業以攝像相關、顯微鏡及顯微系統、光學檢測企業為主。
3.3.4紅外行業狀況
北京、上海、深圳分列前三位,其中北京企業數量明顯高于其他城市;前十名東部占據6席,西部占據3席,中部1席;前十名珠三角占據2席,長三角占據5席。
北京:具備紅外行業全產業鏈,以下游企業為主,上游和中游企業不多;其中,上游產品涉及低溫制冷、紅外材料及紅外燈;中游產品涉及紅外光學系統、紅外光學元件;下游產品涉及紅外成像、紅外檢測、紅外探測、紅外醫療等。
上海:具備紅外行業全產業鏈,以下游企業為主,上游和中游企業不多;其中,上游產品涉及低溫制冷、紅外材料及紅外燈;中游產品涉及發射/接收裝置、紅外輻射材料、紅外光學元件等;下游產品紅外檢測、紅外成像、紅外傳感、紅外探測等。
3.3.5光伏太陽能行業狀況
北京、上海、深圳分列前三位;前十名東部9席、西部1席;長三角分布最為集中,占據7席。
北京:具備光伏行業全產業鏈,從上游到下游,企業數量逐步增多;其中,上游產品以制備加工設備居多;中游產品以太陽能電池組件和控制/電源及檢測企業居多。下游產品太陽能照明居多,其次也有一定數量的光伏系統/產品及光熱產品企業
上海:具備光伏行業全產業鏈,從上游到下游,企業數量無明顯差別;其中,上游產品以制造加工設備及硅材料居多;中游產品以太陽能電池和硅棒/硅錠/硅片生產企業居多。下游產品以光伏系統/產品、光熱產品、太陽能電池及太陽能照明企業為主。
3.3.6光顯示行業狀況
深圳、上海、蘇州分列前三位,其中深圳企業數量遠遠高于其他城市,前十名全為東部發達城市(含香港);珠三角占據3席,長三角占據4席。
深圳:具備光電顯示行業全產業鏈,從上游到下游,企業數量逐步減少;其中,上游產品以輔料及耗材生產企業居多,其次驅動及控制IC、制造及檢測設備企業數量也較多;中游產品以無塵洗凈水處理、液晶模組(LCM)、LCD企業居多。下游產品觸摸產品、投影機PDP產品、顯示器/立體顯示/拼接系統生產企業為主。
上海:具備光電顯示行業全產業鏈,從上游到下游,企業數量逐步減少;其中上游產品以輔料及耗材、驅動及控制IC、制造及檢測設備居多;中游產品以無塵洗凈水處理居多。下游產品以顯示器/立體顯示系統、平板電視為主。
3.3.7光通信行業狀況
深圳、上海、北京分列前三位,其中深圳企業數量遠遠高于其他城市,前十名東部占據9席,西部占據1席;前十名珠三角占據2席,長三角占據5席。
深圳:具備光電通信行業全產業鏈,以中游企業為主,上游和下游企業數量無明顯差別;其中,上游產品以設備及輔料、光纖光纜為主;中游產品以連接/耦合器件、無源器件為主。下游產品以光網絡設備、連接/傳感/檢測設備居多。
上海:具備光電通信行業全產業鏈,以中游企業為主,上游其次,下游企業相對較少;其中,上游產品以光纖光纜、設備及輔料為主;中游產品以無源器件、連接/耦合器件為主。下游產品以光傳輸設備、連接/傳感/檢測設備居多。
3.3.8光存儲行業狀況
整體來看,光存儲行業企業數量較少;上海、深圳分列前兩位,企業數量明顯高于其他城市;
上海:以中游和下游企業為主,上游企業只有1家;其中,上游產品涉及激光頭;中游產品涉及光盤母盤;下游產品涉及CD/VCD光盤。
深圳:下游企業多余下游企業,無中游企業;其中,上游產品涉及激光頭;下游產品涉及CD/VCD光盤和CD/VCD機。
4結束語
隨著光電子潛力的發掘,光電子產業逐步取代傳統電子產業,科學家預言光電子產業將成為21世紀最大的產業,成為衡量一個國家經濟發展和綜合國力的重要標志。
珠三角、長三角和北京市三大區域是光電子企業分布最為集中的區域;深圳市在光電子八大行業中企業數量都排前三,整體企業數量優勢明顯;長三角以上海市為核心、蘇州、杭州、南京等均為光電子企業分布密集城市;珠三角以深圳市為核心,廣州、東莞等燈飾光電子分布也較為密集;臺灣LED行業和光電顯示行業的芯片生產企業數也較多。
云南為緊緊抓住和把握光電子行業發展的機遇和挑戰,一方面做好珠三角、長三角和發達地方的光電子產業轉接工作;另一方面光電子產業作為“綠色能源”產業,既要吸引人才,又要從“綠色能源”“綠色食品”、“健康生活目的地”這三張牌出發,讓“綠色”成為云南產業轉型升級、經濟高質量發展的基本底色。
(作者單位:云南省設計院集團有限公司)