有了這個啟發，遼王又把目光盯上其他特殊人群。
他先是爽快地宣佈，在獅子島工地上那些由海盜、罪犯和俘虜組成的勞動大軍就地獲得自由，每個人還發五兩銀子作為安家費，既可以在原工地上幹活，也可以自謀職業。
被郭英和山壽帶到廣寧搗亂的朝廷軍隊俘虜也有三萬多人，分散在各島上，大多在從事採礦和種植業。遼王也宣佈，這些人從此與內地移民一視同仁，享受同工同酬或分田到戶政策。家眷在內地的，由遼東海軍派出船隻免費將家眷接到南洋。
這樣一來，不僅現有的三萬多特殊勞動力積極性大大提高，還透過拖家帶口，呼親喚友又慢慢增加了上萬勞動力。
南洋各島上的原住民和來自其他地方的早期移民還有不少，由於舊習慣的影響，其中的懶人也不少，自己不愛幹活，也見不得別人幹活掙錢。
隨著大量內地移民的湧入，一些衝突在所難免。特別是在以農耕為主的木洲島，衝突更加頻繁一些。
這裡面的原因是多方面的，有的純粹是宗教在作怪，有的是內地移民仗著遼東軍的聲勢，強佔了當地人的良田。
但是更多的衝突原因是，當地人確實太懶，又見不得內地人開荒致富，動不動就偷偷糾集族人毀壞內地移民的莊稼，燒燬他們的房屋，甚至殺死他們的耕牛。
，！
分散在各島上的巡防營時有出動，自然會拉偏架，袒護內地移民一方，結果導致雙方矛盾越來越深。
遼王連續收到幾起類似的報告後，也是很頭疼。
他既然要在這裡建國，就得接受這裡的居民和他們的習慣。正如他最初穿越到大明時一樣，也得接受大明的貧窮與落後。
最後，在黃湜大才子的提醒下，他決定借鑑當年在遼東搞軍營掃盲的經驗，在各洲設立一個少年軍校，從當地各部落頭開始，每年招收兩千左右的十到十二歲的孩子，先進行三到五年的掃盲教育，符合條件的送往軍營，淘汰的再進行兩年的職業教育，使之掌握一技之長，培養良好的勞動習慣，送往工廠、車間或農場，使之融入一個共同的社會。
在他看來，只要抓早、抓小，讓當地人從小系好勤勞的第一顆紐扣，沒有教育不好的當地人。只不過要多讓遼王府付出一些銀子和糧食而已。
他還讓郭銓建立了一個勞改農場，對於那些好逸惡勞，又屢屢鬧事、屢教不改的，就分批送入農場進行強迫勞動改造。
遼王相信，遼東的勞改農場能把海盜改造成良民，這裡的農場也能把懶人改造成勤快人。
這年十一月底，遼王的舅哥易信到了袋鼠島，和徐乾、徐坤兄弟倆討價還價。
“大徐、小徐，你們兄弟倆個準備好沒有？三日之內跟我去火洲？”
易信剛問了一句，徐乾兄弟倆就嘰哩哇啦說了一大堆：
“易將軍，我們剛在這裡沒安頓幾年，實在不想再搬家了。”
“易將軍，這裡氣候其實挺好的，我們只想在這裡保家人平安。”
“易將軍，我們已經把那幾艘大點的軍艦全給你了。你就放過我們吧。”
“易將軍，再說我們已經幫你看好了那些俘虜，採了那麼多礦石。”
“易將軍，我把我們這幾年攢的銀子都給你，你就放過我們吧……”
自從洪武三十年浙江都司徐司馬自殺後，徐乾坤兄弟倆個為了避禍，竟然帶著東海艦隊的兩艘主力艦“福州號”和“蘇州號”，還有大約兩千人的部屬及部分家眷，逃到南洋陸宋島以南的幾個海島上。
後來聽說遼王不停派出艦隊在周圍搜尋，他們心虛之下，只好又輾轉到了袋鼠島西北角苟且偷生。
但是，在兩年前，他們還是被易信這個死太