検使、旗合、小瀬戸遠見番所へ 午後2時に大波止を出航した検使やオランダ委員団一行は長崎港口の小瀬戸まで行ったが、まだ異国船は見えなかった。そこで検使等はオランダ人を連れて標高100mの丘上にある小瀬戸遠見番所まで800mの坂道を登り、遠眼鏡を借りて望見したところまだ7里か8里も遠くである。検使がオランダ人に遠眼鏡を渡して観察させたところオランダ船かどうか確認出来ないと言う。同行した船頭にも遠眼鏡で見させたところ「荷足も深く見えますからオランダ船でしょう」と進言した。荷足とは喫水のことで、積荷があれば喫水は深く、空荷だと船は軽いので喫水も浅くなる。この船頭、実際は「荷足の深かけん、オランダ船でしょばい」と長崎弁で喋った事だろう。こうして検使オランダ委員達は丘を降り、再びそれぞれの船を沖へ出した。長崎港口の外で待ち受けることになったのである。
盗賊改方 隠密方は沖取締遠見番に合流して沖へ出ていたが盗賊改方はどうしていたか?彼らは長崎港口から約2km西の福田崎あたりにいたが、佐賀領松島から高鉾島沖へ来ていた。これは彼らの持ち場が西方面だったと考えられるが、沖へ出た8艘の船が長崎港外のあちこちに散らばっていたことが分かる。これは強い風と荒れる波の影響もあったろう。
検使等 四郎ヶ島まで進出する 小瀬戸遠見番所の丘を降りた検使とオランダ委員(ホウセマンとシキンムル)一行は高鉾島を過ぎ神島の先の四郎ヶ島あたりまで乗り出した。そこに盗賊改方の船も合流した。例年の旗合地点よりも随分沖の筈である。

フェートン号オランダ国旗を掲げる 少し時間を戻す。検使とオランダ委員一行が小瀬戸遠見番所からフェートン号を遠眼鏡で見た頃、フェートン号はまだ伊王島(Cavalles)を確認出来ていなかった。ペリュー艦長の報告書によれば『緯度の正確性を疑ってしまったことから、また海岸から伊王島が離れているとはほとんど見えなかったことから、すんでのことで通過してしまうところだった』と言う。伊王島は北緯41度20分から北緯42度50分に位置する。彼らの天測は正確だったにも関わらず、「緯度の正確性を疑った」とは伊王島(Cavalles)はもっと北か南にあると思ったと言うことだ。また伊王島の緑はすっかり背景の山々の緑に溶け込んでしまって陸地の一部と錯覚していた。

その時僥倖が起こった。『島に、日本人により、信号として、オランダ国旗が掲げられた』と言うのだ。これによりペリュー艦長は自分達の目の前にあるのが伊王島であり、日本側がフェートン号をオランダ船と誤認して国旗掲揚の信号を送ったことを認識したのだった。なぜ伊王島でオランダ国旗が掲揚されたのか?「通航一覧」にはその記事はない。伊王島は佐賀領であり、遠見番所を運営しているのは深堀藩(佐賀藩支藩)である。なぜ国旗を掲揚したか?伊王島の遠見番は経験的に来航船が長崎港口を見つける困難さを知っており、恐らく荒天の時などは紅毛船(オランダ船)に目印としてオランダ国旗を掲揚していたのではないか? 長崎奉行松平図書頭の「果たして本当にオランダ船か?ロシア船などの異国船ではないか?」と言う懸念は公儀であれ佐賀藩であれ大村藩であれ、現場の遠見番とは共有されておらず、またその懸念を周知させる通信手段も無かった。小瀬戸遠見番所で喫水の深さから「オランダ船でしょばい」と言った船頭、親切心から「ここが伊王島であり島の北端が長崎港への入り口」との意味を込めてオランダ国旗を掲げた伊王島遠見番。歴史的な大失敗の前には小さな過誤が積み重ねられていくものだが、こうしてフェートン号は窮地を脱し、3時15分、偽装のためにオランダ国旗を掲げた。

<
隠密方吉岡、沖取締遠見番を督促 ここで先の「35 襲撃 1幕」の〈 沖取締遠見番 フェートン号に接触 〉の項に取り上げた「崎陽日録」の隠密方 吉岡十左衛門の行動描写に混乱が見られる。伊王島から4kmも沖の佐賀領鷹島(高島)あたりまで隠密方と盗賊改方が出張って沖取締遠見番とともに異国船を遠見していたとあるが、そのあと伊王島辺りで吉岡が「返書が遅い」と沖取締遠見番に督促に行く、となっている。また鷹島辺りで沖取締遠見番や隠密方吉岡十左衛門と遠見していた筈の盗賊改方は方角違いの福田岬辺りにいた、との記述もある。これは丹治擧直が現場にいなかったことによる混乱であろう。吉岡十左衛門は襲撃によるオランダ委員の拉致を真っ先に奉行所に報告したのだから、フェートン号がオランダ国旗を掲げて伊王島北端を西へ回頭した後に沖取締遠見番に返書の督促をしたと判断することにする。つまり『伊王島に沖出の船々遠見していたがあまりにも返書が遅く不審だと隠密方の吉岡十左衛門が乗り出して遠見番の船に乗り付け、どう言う次第で返書が遅いのかと遠見番に聞けば上記のことを言うので一同船に同行してゆくと隠密方船が乗り付けた時に遠見番の船へ舳先が衝突し両船混乱して異国船に遅れを取った。順風が強く、かの船には少し遅れて進んだ』(「崎陽日録」8p)。検使やオランダ委員等の船々よりも先へ出て沖取締遠見番が受け取る筈の返書の確認をするのが役目だったのだろう。
接近 検使とオランダ委員の一行が四郎ヶ島まで出ると、異国船が掲げている紅白青横縞の旗が明瞭に見えた。検使2人が出役通詞達の船を呼び寄せ、通詞今村才右衛門に命じてオランダ委員にオランダ国旗に間違いないか、とたださせたところオランダ旗に間違いないとの返事である。そのまま待機しているうちに順風強くなり、異国船は下段の帆を絞る(帆を絞ることによって船足を遅くする=旗合の船々に近寄るためである)とたちまちのうちに待ち受ける船々の方へ近寄ってきた。
フェートン号 オランダ人を発見 ストックデールの特別手記によれば、『(沖取締遠見番であったろう)小舟をやり過ごしたまま港内へ入ってしまった(注記:これはストックデールの勘違いで、実際は四郎が島周辺の海域で長崎港口に近い海面である)。川を遡航するにつれて、無数の小舟に出会ったが、どの小舟も慌てて本艦の側から逃出そうとしているようであった』と言う。正確にはフェートン号はまだ長崎港には入っていない。

だがペリュー艦長等は伊王島北端から高鉾島方面へ向かったが、そこを「川」と思ったようだ。彼等の知る世界では川(河)は巨大である。ガンジス河、マカオに注ぐ珠江など、河に沿って都市が生まれている。長崎という町もそうであろうと彼等は考え、長崎港口外の小島の数々を川に浮かぶ島々と捉えたのだ。フェートン号が沖取締遠見番の船を置き去りにした後も、高鉾島周辺の海上には無数の小舟がいたようだが、これは漁師達であったろう。巨大な異国船が近づくのを見て彼等は一斉に逃げ出した。その様子をフェ―トン号艦上からは余裕綽々で見降ろしていた。4年前、ロシア使節レザノフの乗船ナデジュダ号が入港した時は沖出役が先導したからたくさんの見物の小舟が漕ぎ出し異国船を一目見ようと群がったものだったが、今回は危険を感じて逃げ出したようだ。だが午後5時、フェートン号の乗組員はその中の1艘にヨーロッパ人がいるのを発見した。これこそが襲撃の標的であった。ペリュー艦長の命令が矢継ぎ早に下った。