也就是说，在旧金山的中国人受到了其他欧洲移民和加州本地人的歧视。比如加州的法律不允许中国人拥有公民权，不能投票。不能将在金矿采掘到的金石居为己有，不能到唐人街以外的地方居住，不能拥有地产等苛刻条例。
说白了，这些华人都是外来契约工，根本没有被当做美国人看，就是一些没身份的非法劳工而已。
为了生存，他们只好在以格兰特街为中心的小范围内活动，这就是唐人街的由来。
李永昌到这里的时候，整个唐人街的华人只有三千人左右。大多是从事采掘之类的苦力活，薪水少，待遇差，甚至连个像样的组织也没有。更加没有武器，是一个松散而懦弱的群体。
虽然如此，但华人在旧金山已经是一个比较大的外来族群了。要知道，此时整个上下加利福尼亚州的人口全加起来。也不过才三十八万人，虽然大部分集中在旧金山，但旧金山一带的人口也不过十万出头。所以三千多华人的话，也算一个很大的族群了。
历史上，要等太平洋铁路修建的时候，华工才会大幅度上升，但就现在而言，这里的华人还是少数族裔。
华人在这里的人数少，又没有枪，也没有强力国家做后盾，为这些华人撑腰，所以自然就要受尽白眼，无法维护自己的权益。
尽管旧金山的白人军队连警察跟民兵加在一起，也不过两千人出头，但依然能够完胜这些懦弱的华人，更不用说其他白人几乎家家户户有枪了。
然而，李永昌率领访问团的舰队抵达这里之后，情况终于有所改观。
虽然中华帝国此时还没有在世界上显露出自己的爪牙，但李永昌毕竟是一国王爷，而且是代表一个国家来美国访问的特使，身份不一般，再加上李永昌本身还带了许多武装部队，而这些武装部队在初到旧金山的时候，就显露出了非一般的战斗力。
要知道，由于淘金热，此时的旧金山完全是一片混乱之地，到处是地痞流氓，每天都有决斗，每天也都在死人，就连所谓的旧金山市